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నిత్యజీవితంలో మనం పరిశీలించవలసిన అనేక పరిస్థితులు సంభావ్యతా నిబంధన 
లకు తనుగుణంగానే మార్పు చెందుతూ ఉంటాయి, ఇవి చాలవరకు కాలగమనం మీద కూడా 
ఆధారపడి ఉంటాయి. అందుచేత కాలాన్ని అనునరి సూ నంభావ్యతా నిబంధనలకు కట్టుబడి 
ఉండే వరిస్థితులనూ, వానికి దోహదం చేసే  కారణాలనూ వివరంగా పరిశీలించవలసి 
ఉంటుంది. ఇటువంటి వాసికి రూపకల్పన చెసే ఉజ్ఞాయింపు నమూనాలే యాదృచ్చిక 
_పక్రయలు అవుతాయి. ఆధునిక యుగంలో ఈ యాద్భచ్చిక _[పవ్మకియల [పాముఖ్యతను 
గుర్తించి భౌతిక, రసాయినిక, బివ, వెద్య, ఇంజనీరింగ్‌, మొదలయిన శాస్త్రీయ విభాగాలలో 
యాదృచ్చిక [ప|కియల నమూనాలను విరివిగా అనువర్తించడం జరుగుతూ డింది. 


ఈ పుస, కంలో యా దృచ్చిక పకియల [పాధమిక అంశాలను గురించి గణితశాస్త్ర 
పరంగా విశ్లేషించడం జరిగింది. స్థలాభావ౨వల్ల యాదృచ్చిక _(ప్మకియలను పరిపూర్ణంగా 
చర్చించడం సాధ్యం కాలేదు, పనిని వివరించడంలో సాధ్యమైనం తవరకు సులభ పద్ధతులనే 
ఉపయోగించబడినాయి, ఆయా విషయాల Ee పరిపూర్ణంగా తెలుసుకోగోరు ఉత్సాహవంతు లై లన 
పాఠకులు పుస్తకం చివరి bibliography లోపే ఎరొ_న్న |గంథాలను సంపదించండి. 


ఈ [గంధంలో గమనించిన దోషాలను, నిర్మాణాత్మకమైన విమర్శలను సహృదయ 
పాఠకులు, అధ్యాపకులు, విద్యార్భలు మా దృష్టికి తెస్తే, పునర్‌ము[దణలో నరిచేసుకోగలము. 


సావ.న 


తెలుగు అకాడమి. ఇంతవరకు ఇంటర్మీడియట్‌. స్థాయిలో షాత్య (గంథాలను, 
డి గ్రస్టాయిలో పఠనీయ[గ్రంఖాలను, 800 కు ఎగా పచురించిందీ, శాస్త్ర గ్రంథ వచ్చురణలో . ఇది 
మొదటిదశ. _ రెండోదశలో. కొన్ని (వ్రమాణీక గ్రంథాలకు ఇనువాదాలను. ఆయా కా స్తాంలమీద 
వాటి వాట్ల ప్రాముఖ్యాన్ని పురన్మరించుకొన్ని మోనో గ్రాఫ్‌లను (వచురించదలచింది: 


క ల! ఇందువల్ల విజ్యార్థషకూ ఉపాధ్యాయులకూ. పాఠ్య గంథాలేకాక' అయా పాఠ్ళంశాల. 
మీది 'నృృతాభయనానికి: నహాయపడే' విషయ. పధానురచనలు కూడా లభిస్తాయి. అంతేకాదు 
ఉన్నత విద్యాజో ధనభోషగా. తెలుగు. ను[పతిష్టితమై తెలుగు. అకాడమి షాత్రి, మరింత 
సుసంపన్నం కాగలదు. 


ట్‌ న్ని 
స _ | 


~~ 


విశ్యవిదాకిలయ స్థ స్థాయిలో శాస్త్ర గంథ ప్రచురణ చేపట్టిన ఈ రెండో దళలో 
“మోన్లోగా గావ్‌ జ్‌! పేరిట (వజశితేవవుతున్న Sal ఇది ఒకటి. 


లం గుజణ్యగహజ': 'పోలీటులై. న్‌ PET ఈ (గంథాన్ని అభిమానించి' ఆదోరిసారసిొ 
wg" Caste ఇచ్చే సూచ్లనలన్లు. పృనర్ముద్మణలో తృప్పక్ష, పరిశీలించ 


ళ్‌ 
గ న శా kL 
= 7 pans జ ఖ్‌ కన్‌ బు. ఎ 
' 
a ౧ 


ART tT 


1. యాదృచ్చిక (ప్రక్రియ నిర్వచనము, భావన ' 117 
1.1: _యాదృచ్చిక ప్రక్రియ-దానీ నిర్వచనము 1 1 
1.1. కే స్థితి ఆవరణ; l. 1.2, నూచిక సమితిః |" fan నంభావ్యతా 
ర 


1.2 యాదృ్భచ్చిక ప|కియలు - వాటి వగ్గికరణము 4 
1.2.1. స్వతంత పెరుగుదలలు i [ప్మకియలు; 1.2.2. మార్కోవ్‌ 
[ప్మకియలు; 1.2.3, మార్గింగేల్సు; 1.2.4. స్థావర. ద్రగ్రీయలు; 
1.5. కొన్ని సామాన్య యాదృచ్చిక |[ప,కియలు 10 న 
Lal: బెర్న్నోలీ [ప్మకియ్య . 1:32 పాయిజాన్‌ (వ కియ; _ 
1.3.3 ద్విమూల్య (పక్రియలు; 1.8.4 గ్యాసియన్‌ లేదా సామాన్య 
పక్రియ; 1.8.5 వీనర్‌ [పక్రియ; 


శి. మారోూవ్‌ శృంఖలాలు. ॥ | కేరి 77 
లీ. మార్కో వ్‌ పక్రియ _ దానినిర్వచ నము 18 
2:2 మార్కొవ్‌ [ప కియలు - వాటివరికర ణము 19 
“త 2. 53 సం|కమ సంభావ్యతా వమేయాలు 19 . న 
24 మారో గావ్‌ శృంఖలం యొక్క సంభావ్యతా విభాజనాన్ని వర్తించడం. 21 
2.5 మార్కోవ్‌ శృంఖలాలకు. కొన్ని ఉదాహరణలు 26 
2.5.1 స్యతంత సమ విభాజనంగల యాదృచ్చిక చలరాశుల 
సంకలనము; 2.5.2 సరళరేఖ మీద యాదృచ్చిక నడక; 
2.5.3 విచ్చిన్న కూ నమూనా 2 5.4 విచ్చిన్న బాంచింగ్‌ పక్రియ; 
2:0. స్థితుల వర్గికరణము 40 
2.7. పునరావృత స్థితులు 46 
2.6. పునరావతృకాల విభాజనము 53 
2.9 అవధి సంక్రమ సంభావ్యతలు ౨55 
2.10 పరిమిత, ఆనంత మారో్యవ్‌ శృంఖలాలు; 2.10.1 వరిమిత 
మార్కో వ్‌ శృంఖలాలు; 2.10.2 ఎర్లాడిక్‌ స్థితులతో విడదీయలేమి, 
పరిమిత మార్కో_వ్‌ శృంఖలాలు; 2.10.3 అనంత మార్క్‌ 
శృంఖలాలు; 


vi 


లీ సామాన్య మాకోగావ్‌ (పక్రియలు 78.140 
3.1 ఉపోద్దాతము 78 
9.2 మారో»వ్‌ ప|క్రియల కొన్ని సాధారణ ధర్మాలు 61 
3.2.1 అవధి విభాజనాలు; 
3.3. పాయిజాన్‌ [పక్రియ 85 
3.3.1 పాయిజాన్‌ స్యీకృతాలు; 3.3.2 అంతర్నంభవ వ్యవధుల 
విభాజనము; 3.3.3 నిరీక్షించు కాల విభాజనము; 3.3.4 ఏకరూప 
విభాజనము; 3.85 పాయిజాన్‌ పృకియల లక్షణాలు; 
3.3.6 పాయిజాన్‌ |ప|కియకు సాధార ణీకరణము; . 
వ్‌.4. శుద్ధ జనన 1పష్యకియ 104 
3.4.1 ప్యరి- యూల్‌ ష్మక్రియ 
3.5. శుద్ధ మరణ [ష్మకియ 109 
3.6:;..- జనన, మరణ |వ|క్రియ 111 
3.6.1 నిరీక్షణా కాల విభాజనము; 
3.7: ..జనన, మరణ |వ|[కియకు ఉదాహరణలు 119 
8.7.1 “వలసితో ఏకఘాత వృద్ది; లీ.7-2 క్యూ నమూనా; 
3.8 పోల్యా పకియ 133 
3౩9 పునః [పారంభ పక్రియ 137 
ల. 391 N, యొక్క. విభాజనము 3.9.2 అవధి సిద్ధాంతాలు; 
3.9.8 పునః పతి ఫలాల (వ క్రియ; 


ఓ వ్యాపి (ప్రక్రియ _ 150-165 
41 ఉ పొద్ధాతము 150 
4.2 _ కోల్మో[గోవ్‌ సమీకరణాలు 153 
4.3 . యాదృచ్చిక నడకకు వ్యా ప్రిఅవధి. 157 
4.4 ఏనర్‌ (ప|కియ 160 


Bibliography - 167 


యాదృచ్చిక ప ప కియ నిర్వచనము, re 


DEFINITION, NOTION OF STOCHASTIC PROCESS 


1.1 యాదృచ్చిక (పక్రియ - దాని నిర్వచనము 


కాలానుగుణంగా మారుతూ, సంభావ్యతా నిబంధనలకు కట్టుబడి ఊండ ఏ (ప్మకియ' 
నెనా యాదృచ్చిక (ప్మకియ (random process Or Stochastic Process) గా 
పరిగణిస్తారు. ఏ సంభావ్యతా _పష్యకియనై నా యాదృచ్చిక |షక్రియగా నిర్వచించడం పరి 
పాటి. ఏ ఎ |[పకియ ఆయినా పురోగమిసోంచే, దాసి పె జరి పే సంథ్యాత్మక పరిశీలన ఆ 
[వ్యకియయొక్క. వి న్తరణను తెలుపుతుంది. యాదృచ్చిక [ప్రక్రియను గణితీయ సంకేతంలో 
కింది విధంగా వర్ణించవచ్చు. పారంభం నుంచి + వరకు జరిగిన సమయము, (0, t లో 
ఏదై నా యాదృచ్చిక (ప్మకియపై జరిపిన పరిశీలనా ఫలితంగా వచ్చిన [పెక్షితపు విలువను 
X తో సూచిసే సెం కాలగమనంలో t లో మార్చువల్ల Xx ల సమూహం ఏర్పడుతుంది. to. 
a విలువల సముదాయాన్ని 1 తో నూచిసే, (ర te T} అనే యాదృచ్చిక చల 
రాశుల సమూహమేర్పడుతుంది. ఇటువంటి ఐ యాదృచ్చిక చలరాశుల సమూహాన్ని అమునా 
యాదృచ్చిక (పక్రియగా నిర్వచిస్తారు. 


పె విధంగా కాక యాదృచ్చిక |ప|క్రియను మరోలా కూడా నిర్వచించవచ్చు. 
యాదృచ్చిక (ప్రక్రియను యాదృచ్చిక ప్రమేయాల సమూహము xX, (అ), tE Tw ౬ వ్‌. 
గా కూడా నిర్వచిస్తారు. ఈ సంకెతంలో, + స్థిరమైనప్పుడు, X e( ) లముఘటన అ లలో శాం 
పుల్‌ ఆవరణము న్‌ పె నిర్వచింపబడిన యాదృచ్చిక ప| క్రియను సూచిస్తుంది. కాబట్టి ఇక్కడ 
X +) యాదృచ్చిక చలరాశి అవుతుంది. కాని ఒక స్థిర లఘు ఘటన అ, (6 6౬ 5, కు 
చెందిన X (0) = =X ని tలో [ప్రమయంగా భావిస్తే దీనిని యాదృచ్చిక ప కియ, 
Xx అ), "యొక్క పతిరూప (ప్రమేయము (sampling Wad లేదా సంభవ విలువ 
realization) అని అంటాము. ఓక పాచిక (d॥౭) ని దొర్రించడంలో ౧వ |పయత్నపు 
ఫలితాన్ని ౫ అని నూచిస్తే, ౫ తీసికొనే నంభవ విలువల సమితి 5 = (1,8,3, 4, 
ర 6... 3,31,554, 4,2, 6, 16, క, ..+ వంటి ఏదైనా ఒక అన్నుకమము యాదృ 
చ్చిక పక్రియ, {X»n=1, 2, 3, .'. యొక్క. టివికల్‌ '1౪1021) సంభవ విలువగా 


పరిగణించవచ్చు. హైదరాబాద్‌ బులిపోన్‌ న ఏశ్చ్చేంజివడ్డ (0, t. కాలాంతరంలో అందుకొనే 
ఫోన్‌ పిలుపుల సంఖ్య; వ యాదృచ్చిక చలరాశి అవుతుంది. ఎదైనా t సమయంలో 


2 యాదృచ్చిక పక్రియ నిర్వచనము, భావన 
ఓక ధర్మల్‌ స్టేషన్‌ వద్ద అయిన విద్యుదుత్చాదన Xx (mgw) అయితే X యాదృచ్చిక 
చలరాశి అవుతుంది. కాని [ కనక మారుతూపోతే, లో ౫, పతిరూప ప్రమయమవుతుంది. 
ఇదేవిధంగా ధవశేశ్వరం ఆనకట్టవద్ద గోదావరీ నీటికొలత € సమయానికి ౫% (అ) 'సెం.మి. 
అయితే, Xx (అ ) యాదృచ్చిక చలరాశి అవుతుంది, ఇక్కడ t అనేది స్థిరవిలువ ఆయినా 
నీటిమట్టము [ సమయానికి ఏదో ఒక యాదృచ్చిక విలువకు సమమవుతుంది. దీనికి అనేక 
యాదృచ్చిక కారణాలు ఉంటాయి. ఎటి సమూహాన్ని ఏ గాను, వీటిలో. ఏదై నా.'ఒక కార 


ణాన్ని అ గాను భావించవచ్చు. కాని t మారుతూ. ఉంటే, t లో X (అ ). (ప కియయొక్క్ల 
_పతిరూప పమెయ మవుతుంది. 


1.1.1 §e ఆవరణ (State space): X, తీసికొనే నంభవ. విలువలను 
స్థితులు (states) అనీ, ఈ సంభవ విలువల నమితిని స్థితి ఆవరణ (state space) uh 
అంటారు, స్థితుల సంఖ్య (1) పరిమితంగా గాని, సంఖ్యాక అపరిమితం (Countably 
infinite) గాగాని లేదా (ii) అవిచ్చిన్నంగాగాని ఉండవచ్చు. కాబట్టి స్థితులనుబట్టి స్థితి... 
ఆవరణాన్ని. (1) విచ్చిన్న స్థితి ఆవరణగాను, లేదా (11) అవిచ్చిన్న స్థితి ఆవరణగాను. 
నీలుసాము. (0, t లో అందిన పల పులసంఖ్య X అయితే, {x t = 0} యాదృచ్చిక 
ప్రక్రియకు సంబంధించిన స్థితి ఆవరణ విచ్చిన్ననమితి. ఇది వ్‌ == 40, 13:9. ete 
(0, t లో నమోగు చేసిన గోదావరి సీట్రిమట్టం కొలత ౫, నెం. మీ. అయితే, Xt.8 
సంబంధించిన స్థితి ఆవరణ ఆవిచ్చిన్న సమితీ. ఇది {x x >= 0 ఇంతేకాక x సంకీర్ణ 
విలువలను హు తీసుకొనవచ్చు. కాని ఈ వుస్తకంలో వానిని గురించి చర్చించడంలేదు. 


2జి నూబిక నతితి (19667 $౭1) : యాదృచ్చిక |ప్ర క్రియ (క్కు. ౬౫ 
లోని X ల సంఖ్య (1) పరిమితంగా గాని లేదా సంఖ్యాక అపరిమితంగా గాని; లేదా 
(ii లేదా అనంతంగా గానిఉంటుంది. ఇది సమితి గ పె ఆరారచడుతుంది. 


(a) T గణనీయ సమితి (countable set), అంటే, గ సమితి 


(1 t=t tp సై “= స్వే ఏ ఏ పరిమిత ధన పూర్ణాంకము | గాని 
కా (1 టే ల | గాని 
లేదా (1120, 7 శ er | అయితే, 


{0,18 ౯) యాదృచ్చిక ష్మకియ రూవము ర్య, Xp see x} 1 
గాని, లేదా [్ళ న్న, వర్ని, =... తో గాని, లేదా [4 నన్న, XX, x; 
క్క...) తో గాని వకీభవిస్తుంది. ఇవి గణనీయ సమూహాలు. , 

(9) గౌ అవిచ్చిన్న సమితి, అంటే గ సమితి 


{t astsb;a,bలు వాస్తవ సంఖ్యలు] 
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లేదా... {tO <t< య, లేదా 4౯ చ శం ఆయితే,. 


— 


Rx te 7} ప|కియ- అనంత 'సమాహము అవుతుంది. 


(ర్చ t ౬ T} లోని ఓ ని పరామితి అన్కీ Tని పరామ్మితి సమితి లేదా.నూచిక 
సమితి అనీ; 7 గణనీయ పరామితి సమితి అయితే, ని విచ్చిన్న పరామితి అనీ; గౌ 
అవిచ్చిన్న పరామిత సమితి ఆయితే; 1 ని అపెచ్చిన్న పరామితి "అని" వీలుస్తాము. t ని బట్టి 
T సమితిని విచ్చిన్న లేదా అవిచ్చిన్న పరామితి సమితి అనడం పరిపాటి. ఇంతవరకు 
మనము గ ని వాసవ సమితి గానే భావించోము: కాని గౌని ఇలా భావించడం అనెది గణితీయ 
వాదనకు నిలబడక పోవచ్చు. అంతేకాక 1 ఒక్క సమయాన్నే సూచించవలసిన అవసరోర' 
కూడా . లెదు. కొన్ని పరిస్థితులలో t భౌతిక పరిమాణాత్మక విలువలను కూడా సూచించ 
వచ్చు. ఉదాహరణకు, లోహపు రేకుపె గల లోపాలను పరిశీలించేటప్పుడు, రేకు వైశాల్యాన్ని 
సూచిక పరామితి, t, తో సూచిస్తూ, t వైశాల్యపు రెకుపె గల లోపాల సంఖ్య, X, ని 
యాదృచ్చిక చలరాశిగా భావిస్తే, (క్కు 6 = 0} యాదృచ్చిక (ప్రక్రియ అవుతుంది. ఇదే 
విధంగా, కర్మాగారంలో తయారయ్యే ఇనప కమ్మీల అడ్ల్డకోత (cross section) వై శాల్యాన్ని , 
పరిశీలించేటప్పుడు కమ్మీ పొడవును సూచిక పరామితి, ఓ, అనుకొంది, + పొడవుగల ఇనప 
కమ్మీ చివర అడ్డకోత వైశాల్యము {౫} ని యాదృచ్చిక ప్రక్రియగా భావించవచ్చు. 

X తీసికొనే విలువ x సంఖ్యాత్మక విలువే కానవసరం లేదు. కాని ఈ వు 
కంలో వీకఘాతీయ* సూచిక క్‌ు ౧ తో X సీీక రించే సంభవ విలువలు తాం. 
విలువలుగా గల యాదృచ్చిక ప|కియలను మాత్రమే చర్చి స్తాము. 


1.1.8 నంఖాన్యంతా బిఖాడినోము (Probability distribution) : స్థిర మైన.. 
పరామితి, t వద్ద XK యాదృచ్చిక చలరాశి అవుతుంది. కాబట్టి (౫ 4 'పకియ యొక 
సంభావ్యతా విభాజనాన్ని t వద్ద మామూలు యాదృచ్చిక చలరాశి X*. యొక్క “విభాజ 
నాన్నీ కనుక్కొనె పద్ధతిలోన నిర్ణయించవ వచ్చు, కాస్సి సమితి 1లో t చలించినపుడు, 
{Xp teT. యాదృచ్చిక పక్రియ ఉద్భవిస్తుంది. దీనిని { ౫ } లోని యాదృచ్చిక 
చలరాశుల సంయు క్ర విభాజనము (joint distribution) ద్యారా వర్షించ వచ్చు. T అవి 
చ్చిన్న. సమితి అయ్యే సందర్భంలో ix 9 teT} లోని యాదృచ్చిక చలరాశుల క 
అనంత మె, దాని సంయు క్ర విభాజనాన్ని నిర్ణయించడం ఆసంభవమవుతుంది. ఈ పరిస్థితులలో న 
ప|కియను పర్గించడానికై ఎదైనా uN కశత స. అనే n (ఈ 0) యాదృచ్చిక 


*teT,heT>3t+heTఅనే ధర్మంగల సూచిక సమితి ౫ ని ఏక 
ఘాతీయ సూచిక సమితి (linear index set) అంటారు. 
| 0, -- 1, క. 99 |g {x = షష లు ఏకఘాక్రీయ వాస్లవ 
ం సమితులు, . వ జు bf Se hy, శే ల . nr 
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పరామితికి, స్థితికి చెందిన ఆవరణల లక్షణాల దృష్ట్యా వర్షిక రించిన వివిధ 
యాదృచ్చిక ప|కియలను దిగువ చూడవచ్చు : 


వ. (2) ఏచ్చిన్న పరామితి, విచ్చిన్న స్థితికి చెందిన  ఆవరణలుగల యాద్భచ్చిక 
ప|కియలు : 
ఉదాహరణకు : (i) పాచికను పలుసార్జు దొర్హించడంలో ఓవ [ప్రయత్నంలో 
పాచిక పెగల బిందువుల సంఖ్య, XX. 


(ii) రోజువారిగ్యా అంటి t వ రోజున పనిలో నియమితులై న 
కార్మికుల సంఖ్య, బో. 


(b) అవిచ్చిన్న పరామితి, విచ్చిన్న స్థితులకు చెందిన ఆవరణలుగల యాదృచ్చిక 
(ప్మకియలు : 
ఉదాహరణకు : (1) ప్రారంభం నుంచి €(౮ 0) సమయానికి స్థాండువద్ద బస్సు 
కోసం నిరీక్షిసున్న విద్యార్థుల సంఖ్య X.. 
(11) ఏదోరోజున t సమయానికి హైదరాబాదులో సంభవించిన 
బస్సు (ప్రమాదాల సంఖ్య X. 
(c) విచ్చిన్న పరామితి, అవిచ్చిన్న స్థితులకు చెందిన ఆవరణలుగల యాదృచ్చి క 
ప|కియలు : 
ఉదాహరణకు : (i) tవ మగ పువాడు రరర చేనెత్రబట్ట పొడవు ల, 
(11) రోజు (ఓ) వారీగా నమోదుచేసిన గోదావరి ఆనక ట్టవద్ద 
నీటి మట్టము, వష. 


(6) అవిచ్చిన్న పరామితి, అవిచ్చిన్న స్థితులకు చెందిన ఆవరణలుగల యాదృచ్చిక 
(పృకియలు : | 


ఉదాహరణకు : (1) హైదరాబాద్‌ నగరానికి రోజులో నష్టము (ప్రారంభం నుంచి 
1 సమయం వరకు అందచేసిన సిటి పరిమాణము, X,. 


(11) చేనేత పరిశ్రమలో € సమయం వరకు జరిగిన బట్ట 
ఉత్స తి, 


ఇప్పుడు, యాదృచ్చిక (ప్రక్రియ (౫, €౬౫| లో ౫ ల మధ్యగల నంబంధాల 
దృష్టా యాదృచ్చిక ప|కియలను దిగువ పెరొన్న పక్రియలుగా వర్లీక రి సాము. అనుకూ 
లతకోసం, (వస్తుతము Te 0, 0) ఆని, Xx లు వా స్తవవిలువలనే స్వీకరించే మప సు 
గలరాశులనీ భావిద్గాము. 


"ద్ర యాదృచ్చీక (ప్రక్రియ నీర్వచనమ., భావన 


1.2.1 న్ధుతం(త పెడభుదలలుగల (వ్యకియలు (Process With indipendent- 
increments): T= 0,0) నుంచి 0<t<t<...<t ఆయ్యేటట్టుగా ఎన్నుకొన్న 
పతీ పరామితి సమితి, .€,..., tb, 8X =0 అయి, X, —X, టమ —X 
న్‌ 2 a} య గా (| క al 
స్వతంత్ర యాదృచ్చిక చలరాశుల అయితే, (౫, 1 ౭ ౫) ని న్వతం్యత పెరుగుదలలుగల 
(ష్మకియగా పిలుసాము. ఇక్కడ 20౦ విలువ ఏదైనా పరిమిత పూర్జాంకం - కావచ్చునని 
గమనించవల. కాని T= $0, 2 eo} ఆయితే, స్వతం[త పెరుగుదంలుగల (వ్మకియ 
1% t ౬ T} ను.స్యతం|త యాదృచ్చిక చలరాశులు 

2 =X, £, =X, లా లాల ;1=Lb 2, 3, పాపేన 


యొక్క అన్ముకమము (sequence) గా వాయవచ్చు. కాబట్టి, 
ఎద్య జ జ క TAT 3 TL, అనీ, 


ఆటువంటి నమో (్మకియ $౫. €=0, 1, 2, oh ను Had పెరుగుదలలు 
గల [వ[కియతో చెప్పవచ్చు. అప్పుడు ఈ క ళల ఉపాంత (marginal) 
విభాజకాల ఆధారంగా గ్య ల సంయుక్త విభాజనాన్ని నిర్ణయించి, fx, t=0, 1, ae} ను 
కణంగా పరిశీలించవచ్చు. 


1.2.2 మారోోల్‌ (పయ (Markov Processes): T నుంచి t, <ty<t, 
అయ్యేటట్లు ఎన్నుకొన్న పతి t,, వా స్‌ ల లకు, షరతు సంథావ్యత. (conditional pro 
bability) P Uy, € A Ag చ 8) పతీ ౫, &. విలువకు, ఈ షరతు 


వ 
సంభావ్యత E Lt € A ష్‌ 1. ల) కు కు సమా నమెతే ఆట్లాంటి [ప్ర కయ { xX, 
ET } ను మారో[వ్‌ పకియ (Markov process) అంటారు. అంతే, 
(య్య te T; మారోవ్‌ 'ప్మకియ అయితే, [వష్యకియలొ 5 చెందిన వరమాన విలువ 
(కృ) తెలిస్తే, కు చెందిన భావికాలపు విలువ ౫, క చెందిన భూతకాలపు విలువ 
ల 
(5) పై ఆధారపడక్క క పైనే ఆధారవడుతుందన్నమాట, ఇదే విషయాన్ని ॥ విలువలకు 
వి స్పృతీకరించి, సంకేతాలలో వాసే, Tకి చెంది, t, య 1, SS t <t అయ్యెటట్లుగా 
న్‌ న్‌ 
(పతి ళ్‌ eet, t లకు సంబంధించి, సతి ఆవరణ 5 లోని (పతి ౫, 25, ఏ క కు 
i 1 
సంబంధించిన ఎ వుకియ స్ట, t౭ T} కు, 


P(X, a శ = X XK, a x ) 


n 


పాత 
= P (Xx <a CT Xx) ee (1.2.1) 


అవుతుందో, ఆ ప్రకియను మార్కో వ్‌ (ప్రక్రియగా నిర్వచిసాము. 


యాదృచ్చిక [ప [క్రియలు _ వాటే వరీక రణము శో 
Ps, x; ts 2) == P(X, 8 A ప = x); A = (౫ x<a} 
అనే [(ప్రమమాన్ని మార్కో_వ్‌ (పక్రియ సంకమ సంభావ్యతా [ప్రమేయము (Transition 


probability function) అని పిలుసాము* పె (1.2.1) నియమాన్ని మార్కొవ్‌ నియమ 
మంటాము. దీనిని శు సంక మ సంభావ్యతా [ప్రమయ రూపంలో వా సే. 


|] 
{X, lc ]= tb, య)} న్వతం[త పెరుగుదలలుగల యాదృచ్చిక [పక్రియ ఆయి, 
ఏదేని స్థిరసంఖ్య ౦కి, P(X =b)=1 అయితే {X,teT}ని gn 


RM = XxX SE SEE x; tb a) 


[ప్మకియగా పరిగణించవచ్చు. 
ఇకగాడ b ఏ వా సవ సంఖ్య అయినా కావచ్చు. 


పెన చెప్పినట్టు 1<t య... 6€ అఆయేటటు t, ty, «=. 
రా ర 0 1 n ధిర 
[7 నుంచి ఎన్ను కొని, 


n 
n m= | గ m-1l 
| కీ! 
= b + p33 ళా వాయవచ్చు. 
m=1 


ఇక్కడ Z =X -Xy (m= 1,2, .. .=మ)లు స్వతంత సురుగుదలలను సూచించే 
m m-l | 
స్వతం్యత యాదృచ్చిక చలరాశులు కాబట్టి, 


EM మ... తే తు, wg న న్‌) 


n-1 
మా Pp oe హె X ia IE = న్య) అవుతుంది. 
ల్‌! స్వతంత పెరుగుదలలుగల యాదృచ్చిక (ప్మకియ {X, 18౬ క) మార్కవ్‌ (పక్రియ 


అవతుంది. కాసి దీని విపర్యయ ఫలితము నిజం కాకపోవచ్చు. ఎందుచేతనం టి, 
P(X, జ {X, te T= b,0)}ను మారో,_వ్‌ (ప్రక్రియ అనుకోండి. 


అప్పుడు 1 జమ. <1 యయ అయ్యేటట్టు 7 లోని ఏ రెండు పరామితి విలువలు ఓం ఓ రు 


సంబందించి 


P(X, =}, Xp =x, Fae P(X =x, వరి , వవ = ౫) 


=P (Xp =x, ).P (య్య — Xt జై Xt, = x) 


8 యాదృచ్చీక [పకియ నిర్వచనము, ఖొవన 


అవుతుంది. కాని పె _(ప్మకియ స్వతంత. మెరుగుదలలుగల యాదృచ్చిక [పక్రియ 
అయినటయితే, 
(ఎ 
PX =x, X XK, అన్య) క ర్య కావి). ర్మ —Xy =x) 
ఈ రెండు వరుకాబట్టి మార్కోవ్‌ ప క్రియను ఎల్పప్పుడు స్వతంత్ర పెరుగుదలలుగ ల 
యాదృచ్చిక _ప్మకియగా పరిగణించలేము. మార్కోోవ్‌ (పుక్రియల వర్ణనలో నంక్రమ 
సంభావ్యతా [పమేయాల |పధాన పాతను 2వ అధ్యాయంలో. నమ।|గంగా పరిశీలిస్తాము. 


1.2.లీ చూర్గింగేల్బు) (Martingales): విచ్చిన్న లేదా అవిచ్చిన్న పరామితి 
సమితి, ఇతో t, < << t య ఓ, ని సంతృప్రిపరచే (పతి సమితి 
1, ల EY, కి గాను, నొ లోని [పతి ప 


రః 00) న్న స్థితులకు గాన్కు ఏ [పక్రియ 
X,tETక 


E (ర్క జ ౮ =x )=2్ష పస 1.2.2) 


n +] 1 n 
అవుతుందో, అటువంటి |ప,కియను మార్చింగేలు (martingale) అంటారు. (1.2.2) ను 
మార్జిం గల్‌ సమానత ము [martingale equality) అంటారు. 


n 


| వ పు. | (పక్రియలోని స లు స్వతంత యాదృచ్చిక 


n 
చలరాశుల E (స) = 0 1.1 అయితే గ = 5 మ గా నిర్వచించిన యాదృ 
) == | 


చిక చలరాశుల సమూహము (x: n= 1,2, ee} మార్చింగెలు అవుతుంది. ఎందుచేత 
నంటే, 


(గ గ కసా, సే = x) 
mm E(X క X —౫x, see: X =x) 
వా E (స్ట X uw +03 య్య =X) J E Ce) 


సీ 


n 


మొదటి ఆట పారంభంలో వున్న జూదరి Ha x తోను '౧' వ ఆట 
కాగానే జూదరి వద్ద ఉన్న మొత్తం ధనం న p(B hy 2. =) తోను నూచిస్తే గుం 
త యాద్యచ్చిక దలరాశి అవుతుంది. (వతి p00 bree జూదరి వద్ద నుంచీ నగటు 


ధనము, ఆట (పారంభంలో ఉన్న దానికి సమానమైత్తే ఆ జూదరి ఆటను 'నిష్పాక్షికపు ఆట 


యా దృచ్చిక (పక్రీయలు _ వాటీ వర్గికరణము ర్త 
‘fair game) అని ఆంటారు. అంటే, 


E (ర్న శాక, లం చ = x) = ౫. 
మార్జింగేలును నిష్పాక్షిక జూదపు ఆటలకు తగిన సమూనాగా పరిగణిసారు. మో విధంగా 
t సమయానికి జూదరి గెలుపును ౫ తో సూచిస్తే, (1.2.2) [వకారం t సమయానికి జూదరి 
మొత్తం గెలువు ౫ అయితే, 1 ,] సమయానికి అతని సగటు గెలుపు గ కావలె. ఇది 


(1, =. 1 _, సమయాల వరకు వచ్చిన గెలుపులమై ఆధారవడదని భావించవచ్చు. 


(స్య, t= 0. ప్మకియలో న్వతం్యత పెరుగుదలలు గలిగి, P (౫ = 0) = 1, 
పతి $౮౧౦౫౨ X <o E(X)= స్థిరాంకమయ్యే పతి {x t= 0. 
కూడా మార్చింగేలు అవుతుంది. Y=xX, yx, —-X, = లు స్వతంత 
యాదృచ్చిక చలరాశులు. 


X = X — X అ X, —X 
tai t ల (న గ స్ట స్ట * య న! 
ఓ టు 
n+ n 
n+l 
= శె Y, 
j= 
E త్‌ — న “అలతి 9 షే! మా x) 
వా భా. — స క) షే కా న, ఉర శక Xn} 
=E.X XxX వన్న) 


(““ EB CI ఇ 1) 


ID 
n 


దీనిని గురించి ఇంకా తెలుసుకో కుతూహలంగల చదవరులు Doob [వాసిన 
తు Process’ అనే [గంథాన్ని నంపదించవచ్చు. 


1.2.4 శబర (వ(ీయలు (Stationary Processes) : {t,, tys--e5t "న 
T లోని ఏదో ఒక ॥ పరామితి విలువల సమితి అని అనుకోండి. [పతి వా స్తజ్ఞాంకము 
h > 0 (పతి సమితి 1 FE ఠి 5 93 } క్ర {X (te T+ లోని (te +h 
x, th +n} “Xt, Ap. ) అనే రెండు చలరాశుల సమితులు ఒకే 
సంయు క్ర విభాజన [ప్రమేయంగల యాదృచ్చిక చలరాశుల సమూహాలై తే (౫, t ౬ T}ని 


10 న ' యాద్యృచ్చిక: ప్రక్రియ నీర్వచనము, .ఖ్రావన 


స్థావర యాదృచ్చిక (పక్రియ అంటారు. అంటే, 'విభాజన ప్రమేయాల రూపంలో, 
ఏ ఏ ప్రక్రియకు. 


= 


hh 


స్త ట్‌. న్‌? treet) 


కన్‌ se tFhoerst Fh) ns (1.2.3) 
నిజమవుతుందో, అది సావర యాద్భచ్చిక '(పృకియ. 


స్థావర యాదృచ్చిక ప కియలు ఎప్పుడూ సంభావ్యతా . సంబంధిత సమతా స్థితిలో 
ఉంటాయని. (1.2.3) ద్వారా వ్యక్తమవుతుంది. ఈ (ప్మకియల. విషయంలో... పరిశీలనా 
సమయాల వై ఆధారపడక, t చలిస్తున్నా య లన్నీ ఒకే విభాజనాన్నీ అనుసరిస్తాయన్న 
మాట. (1 2.8) [పకారం గు యొక్క న. [ప్రమయము 


జ we a F(x స్‌ ఓ = F a di F(X) అనుకోండి. సం 


ఇక్కడ n=1, = €గా  తీనుకొన్నాము. 2వ ఆర్హరు ఘాతికలు పరిమితమై, (పతి 
1-0౦, €౯ 1కి గాను, సహవినసృతి [ప్రమయము 


C(t th) SN (త్య, గ) యాట (లేవ త. — (ళ్ళ న్డ్‌ (వు 
జతి (0, h) 


అవుతుందో; అంటే, ఎప్పుడు C (t, th), h వెనే ఆధారపడి ఉంటుందో, ఆ ప క్రియను 
విన సృతార్థ (wide sense) న్థె సావర లేదా సహవి నృృతి న సావర వ కియగా పిలుస్తారు 


1.3. కొన్ని నామాన్య యాదృచిక ప్రక్రియలు. : ల వ. 


ఈ అధ్యాయం ముగియకముందు సామాన్యంగా అ " ఎదురయ్యేకొన్ని 
యాదృచ్చిక [ప్మకియలను గురించి చర్చిద్దాము. 


1.83.1 బెర్నోలి (ప్రక్రియ (Bernoulli Process ) 

ఇది విచ్చిన్న పరామితి, _ విచ్చిన స్థితి అవరణలుగల ప్రక్రియ, “సఫలము”, 
“విఫలము అనే రెండు ఫలితాలుగల న్వతం్యత పునరావృత [ప్రయత్నాల శేణిని పరికీలించండి. 
వతీ [పయత్నంలోను “సఫలము, “విఫలముి'ల సంభావ్యతలను వరసగా p, q లతో 
సంకేతిసే, p= 0,4 = 0; చరా] అవుతాయి. _“0' (ప్రయత్నాలలో సంభవించే స సఫలలాల 
సంఖకత్ల ప త్రో సంకెతినే, ws; చలరాశి, 5 (1 =1, 2,5...) యొక, నంభావ్యతా 
విభాజనము . 


'కొన్ని సామాన్య యాదృచ్చిక (ప్రక్రియలు "11 


(వ్వ, 1=1, 2, 4} అనే యాదృచ్చిక చలరావల సమూహము- $0, 1, 2, ...] స్థితి 
ఆవరణగాగ ల యాదృచ్చిక పక్రియ అని స స షమవుతుంది. ఈ [ప్మకియను బెర్నోలీ ప|కియ 
pes process) అని వీలుసాము. య వ్‌ 


(k లా 1) వ సఫలము తరవాత ఓ వ నఫలము సంభవించడానికి. అవసరమయ్యే 
[ప్రయత్నాల సంఖ్య (అంటి, 1-1, [వ సఫలాల మధ్య [ప్రయత్నాల సంఖ్య) (గ తో 
సూచి'నె సె, తతి 1కి గ యొక్క విభాజనము 


తే =r) = రాస. క్‌ ఠి 6964 


ఇక్కడ ఇ, లు స్వతంత చలరాశులై ము శ్యామీతీయ విభాజనము (Geometric 
distribution) ను అనుసరించే యాదృచ్చిక చలరాశులని గమనించవచ్చు. కాబట్టే బెర్నోలీ 
డత స్యతం|త వపరుగుదలలుగల ప|కియగా పరిగణించవచ్చు. (య, 1, కు కే 


వై 11 య అయ్యే పతీ 2.1 స్థితులు, .. 1, కు 
i (వ, చా 1 వ్‌ జ ఈ 46 4 4 63 5 = క్ట 
హా Sl న్‌ా!) 


'కాబట్టీ మార్కోవ్‌ నియమము (1 2 1) [పకారం బెర్నో లీ (ప కియ వీచ్చిన్న స్థ నీతి ఆవరణ 
S= {0, న .} గల ay [ప్మకియ అవుతుంది. 
ఉదాహరణకు, పూరి అయిన 1 వస్తువులలో గల దోష వస్తువులు D. ఆయితే 
(మ, 221, 2, ...} బెర్నోలీ |హృక్రియ అవుతుంది. 
1.లి.2 వాయిశాన్‌ [వకోయ (Poisson Process) : ఇది ఆవిచ్చిన్న 
కా సమితి, విచ్చిన్న స్థితి అవరణగల యాదృచ్చిక (ప్మకియ. పటు కన్ను 
స్వీకృతాలకు అనుగుణంగా సంభవించే ఘటనలను పరిశీలించండి. 
(a) వివర్ణిత కాలాంతరాలలో సంభవించే ఘటనలు పరన్పర- స్వతంతాలు అవడం. 


(b) ఒక స్థిర ధనాంకము, ౫ కు కంటే Nt అనే అతిన్వల్ప' కాలాంతరంలో 
సంభవించే ఘటనలు సంభావ్యతలు : క 


(i) P (ఓ ఓ -(- At లో నంభవించే ఘటనల సంఖ్య = 1} 

- జు గగ + 0 (గ) 
ఈ (11) P [| (శీ t FAt లో సంభవించే ఘటనల సంఖ్య >1} = 0 (At) 
O(At) 

t 





అవడం, ఇక్కడ ౧౪ > 0 అయితే, ౫ 0 అవుతుందని ౦ (౧ నూచి 


స్తుంది. పె (i), (11) ధృష్యా. 


12 యాదృచ్చిక' [పక్రియ నీర్వుచనము, భాషన 
0. (1 t+ At లో సంభవించే ఘటనల సంఖ్య = 0) 

=1—AAttO(At) 

స్వేక్సతాలకు అనుగుణంగా (0, t లో సంభవించే ఘటనల సంఖ్య X తో 

చిస్తే వక్క t > 0} యాదృచ్చిక పక్రియ అవుతుంది. దీని స్థితి bees 


= (0,1,2... |. వై (a, (b) స్వీకృతాలననుసరించే పతి ౫, (t = 0) 
పాయిజాన్‌ విభాజనము. 


ర్‌ ద [ey 





P (X wk] జ న ల  k=0, l, 2 wes 

k! 

ను అనుసరిస్తుందని చూపవచ్చు. ఇట్టి $౫, t= 0} ను పాయిజాన్‌ (ప్రక్రియ అంటారు. 
ఇక్కడ ౫, (0, € లో ఒక యూనిట్‌ కాలంలో సంభవించే ఘటనల సగటురేటు (6212 


rate) ను తెలుపుతుంది. 


(2), (b స్వికృతాల [ప్రకారం [పతి t, 5 కంక, (0,t , (5, 5-1-4 లలో 


సంభవించే ఘటనలు య్య టా య్య? త్య టల స్యతం త చలరాశుల ఓ కే విభాజనాన్ని 


అనుసరిసాయి. కాబట్టి ae [(వ్మకియ క కనవా Frees 
అవుతుంది. ఇక్కడ క 


kr 
నభ {Mt} ee 
P(X, X,=k)=e tt ——,k=0,1,2,... 
కాబట్టి P (XX =k) = 2 (x, X,=1) 
మధ్యమ విలువ, విచలన [ప్రమేయము 
E(X 


మ్‌. = Nl = Var. (X శా వ్య) | 


s+t s+t 


ఒకే వరామితిగల ఏదేని ౫, ౫, అనె రెండు పాయిజాన్‌ ప్రక్రియల సహవిన్హృతి 
[ప్రమేయము 
C(s,ty=Coyv.(X,X)=E(XX)—-E(X)E(X,) (0౫ 5) 
భా వ [0 జ Xx} —As.At 
= E(X)E(XK—X)J+TE(X2)—Xs. సె 
= As. A(t—s) + (౧5 + Ms) — As. At 
= క = XN. min (8 ఓ) 


కొన్ని సామాన్య యాదృచ్చిక [ప క్రియలు [స 


గయళ్ళ్య య, య వ్‌, అయ్యేటట్టు (పతి శ్వ, ళ్ళ 9 tot లకు. 
(య 1, wT 1 అయ్యె పతి 113 స్త 1» 1 పూర్ణాంకాలకు సంబధించి, 

P(X =ix =i, క్యు =i =e Fe క్‌ 
కాబట్టి మార్కొంవ్‌ నియమము గ స! 1) [వకారం, పాయిజాన్‌ వ్యక్రియను స్థితి ఆవరణ 
5.= 0, 1,2, =) గాగల మార్కోవ్‌ (ప్రక్రియగా పరిగణిస్తాము. out (వ క్రియ 
గురించి సమ గంగా 3వ ఆధ్యాయంలో తు వను 

1.8.లి దింయూల ల్‌ He [కియలు (Two- -valued Processes) : రెండు 
విలువలను. స్వికరించే బెర్నోలీ యాదృచ్చిక చ లరాశులు సంభావ్యతా సిద్ధాంతంలో పముఖ 
పాతను. వహించిన ఖ్రై, - యాదృచ్చిక. [ప క్రియలలో కూడా ఏదేని రెండు వా సవ విలువలు.. 
2, bను స్వీకరించే [ప్మ[కియలకు (పత్యేక స్థానముంది. ఇటువంటి యాదృచ్చిక [(పకియలను 
ద్విమూల్య (Two-va lued) (ప్మకియలంటారు, (వత్యెకించి 1, _ 1 అనే రెండు నంభవ 
విలువలను “స్వీకరించే ద్విమూల్య (ప్మకియ, (వం t > 0}, Se) (One = minus 
- 09౭) ప్రక్రియ అంటారు. (౫, $2౦0. అనేది “1, - 1” ప్రక్రియ అయితే, 

b + a b టక డి 
a శ టో క్స్‌ క Xx e131) 





గా చిర్వచించిన మగ, 120 | ప్రక్రియ 2, ర నంభవ విలువలనే స్వీకరించే ద్విమూల్య 
ప్రక్రియ అని స్పష్టమవుతుంది. 

1 జామ |వ|కియ { xX, t= 0 | ను కింద పేర్కొన్న విధంగా కూడా 
వ్యక్త పరచవచ్చు. t=0 అయితే N, =0;t>0 అయితే, N ని (0; t లో 
జ స కన్యా తన విలువల మధ్య చెందే మార్పుల సంఖ్యగా నిర్వచిద్దాము. అప్పుడు 
{Npt2> 0. 3వ అధ్యాయంలో నిర్వచించిన గణన ప్రక్రియ (00320198 process) 
గా గ, xX ని వథమ విలువగా స్వీకరించే “1, -- 1” |వృకియ, {X,t2=0. 
ను 


వ ప (1.3.2) 


గా 'వ్య క్రీకరించవచ్చు. 


(వత్యేకించి . N, t > 0 అనే గణన (వ్యకీయ ఒక పాయిజాన్‌ పక్రియ. 
అయితే, (1 3.2) లో నిర్వచించిన xX, t= 0.ను యాదృచ్చిక వెరిిగావ్‌ నిగ్నల్‌ 


14 యాదృచ్చిక్‌ (ప్రక్రీయ నిర్వచనము, థావన 


(fandom telegraph signal) అంటారు. అందే 1.8.2) లో నిర్వచించిన 
(ర్చి 12 0) కు సంబంధించి, | | ర. 


జ్‌ ws ట్‌ 
ఫ్‌ 
i ల్‌ 
y 


|. పక్రియ యెక్క సంభవ: విలువలు వరనగా 1, ఇన అయి,.. 
iy {Ny (౫0) పాయిజాన్‌ (పక్రియ అయి... 


పాం! 
జ్‌ 


. (111 (ష్మకియ [పథమ విలువ బ్య N తో స్వతం్యతించి అనునరించే యోర్భ. 
చ్చిక చలరాశి అయి, 


P(X =1l)/=}= P(X =-1 


ak {x, 20} ని యాదృచ్చిక టెల్మిగాఫ్‌ సిగ్నల్‌. అంటాము. యాదృచ్చిక 
సిగ్నల్‌ జన రెటర్ష ప నన. ఈ యాదృచ్చిక చెల్మిగాఫ్‌ సిగ్నల్‌ సిద్దాంతము విరివిగా 
ఉపయోగిస్తారు. 


I | [2 Oy ies seg చెరుగుదలలుగల ఒక ధన వూర్ణాంక విలు. 
జ్జ ఫ్లై” గ | 
జస 


౫ "వై (11) లో ;వలె నిర్వచింపబడిన యాదృచ్చిక చలరాశి అయితే, 
{x, €౫ 0). అనే ప్రక్రియ “1, - 1 ప్రక్రియ అవుతుందని రుజువుచేయవచ్చు. 


సున్న, ఒకటి అనే సంభవ విలువలను స్విక రించే ద్విమూల్య వకియను “0,1 
aap) పృకియ అనడంకూడా పరిషాటి. ఏదై నా యంత్రాన్ని పరిశీలించేటప్పుడు, 
అది “౦1” లేదా “ff” అనే రెండే రెండు స్థితులలో ఉండవచ్చు ఆ యం|తము “౦1” 
(సతి) లో ఉంటే, అది చెడిపోయేముందు యాదృచ్చిక కాలం వరకు పనిచేయవచ్చు. “off” 
స్థితిలో ఉన్నదంటే, అది పూరిగా మరమత్తు (repair) అయ్యేుటంత యాదృచ్చిక కాలమూ 
off’ స్థితిలోనే ఉంటుంది. అప్పుడు t క్షణం వద్ద యం తం కంలో ఉంటె. నక = 1 3 
అనీ “920” స్థితిలో ఉంటే, ౫, = 0 అనీ (వాసి “0, 1” |పక్రియను నిర్వచించవచ్చు. 


వై ఉదాహరణలో వర్ణించిన (౫, 120} యొక్క లక్షణాలను పరిశీలించే. 
టప్పుడు (ప్రక్రియ 0, 1 విలువలకు మధ్య.మార్పుచెందడానికి పట్టేకాలాల గురించి కింద 
సేర్యాళ్న! ఉ పకల్పనలు సమంజసమని తోస్తుంది. “0 ప క్రియలో 0 1 పట్టు 
కాలం ఒక అవిచ్చిన్న విభాజనాన్ని అనునరించే యాదృచ్చిక చలరాశి ౮; 1,30 పట్టు 
కాలం మరో అవిచ్చిన్న విభాజనాన్ని అనుసరించే యాదృచ్చిక చలరాశి V పే . 
{x5 t > 01. అనెది ఈ ఉపక ల్బనలనుు సంతృప్తి విపరిచే (పక్రియ అయి, Ub, Vo Mea 
అంక మధ్యమాలుగల్ర అవిచ్చిన్న యాదృచ్చిక చలరాశులు అయితే, 


17 న్‌ క. 
i 


కొన్ని సామాన్య యాద్యచ్చిక ప్రక్రియలు. 15 





f WR Se, Wee Si : 1౨ (౮ ode ఇ 
Lt- వై xX =0 = క హో 
౦0 - U) సన వ్‌ (1) 
tO క E (U)+E{(V) 


అని ని చూవవచ్చు దీనిని 3.9,3 (పకరణంలో చూడండి, 


1.తీ.4 'గానియన్‌ లేదా” సొవూన్య (వ జ్రోయ (Gaussian or normal 
process) : ఇది అవిచ్చిన్న పరామితి, అవిచ్చిన్న సి నితి ఆవరణలుగల (పకియ. పతి షరా” 
మితి విలువల సమితి, (సే ..=3 ళ్ళ) కు: సంబంధించిన. ఏ ప్రక్రియలోని. 
X, r=, ద్రం. nO సంయుక విభాజనము n-చలరాకుల సామాన్య విభాజనము 


Se 


(సహా normal distribution) అవుతుందో, అట్టి [ష్మకియను గ్యాసియన్‌ (ప్మకియ. 
లేదా సామాన్య వకియ అంటారు. దీని లాక్షణిక పమేయం ( characteristic function 
ద్వారా ఈ (ప్రక్రియను వివరిద్దాము. (pe ర, 49 ఖర్మ అనె ॥ వా స్తవాంకాలకు 
టల పళ జ ల నంయుక లాక్షణక | పమేయము. ౨. క్ట 


FE os. కే = E ep ff (6, జు Fu FO. Xx )). 
ty ల లి రు శ టనే య. [ 

మ... టి. | 
=exp “i 2 9. E (య్య) — 4 s రి 6 Cov (Xt, ) వేప 2) ~ (re 
waist Tash hket i | 


జో 


(1 లి.3) ని పరిశీలిస్తే ఈ ప కియ మాధ్యమ విలువ పమెయము EX); సహవి నృతి 
(ప్రమేయము (౫,౫) .లతో ఈ ప్రక్రియను సంపూర్ణంగా వర్టించవచ్చునని వ్య క్రమవు 
తుంది. . ఇంతేకాక : చర్య లు పరస్పర స్వతం|[త చలరాశజులై (పతి 18 xX సామాన్య ' 


i= 4/-—1 అయితే, {x , (0) ను సామాన్య ప్రక్రియగా నిర్వచిస్తాము. 


వి్ధాజనాన్ని, అనుశరిశే స్థ అట్టి గాసియన్‌ పకియను నస గాసియన్‌ (ణి (pure 
Gaissian series" “అంటారు. 

యాదృచ్చిక న్‌ా! సిద్ధాంతంలో సామాన్య _(ప్మకియ (పధానపాత వహి 
స్తుంది. దినిని పెక్కు _ప్మకియలకు ఉజ్జాయింపు _ప[కియగా స్వికరిస్తాము. "9 [పక్రియ 
లలోవలె. కొకు. దీనికి సంబంధించిన క్రొన్సి "క్రిష [ప్రశ్నలకుకూడా అతిసుళువుగా సమాధానా 
లను రాబట్టవచ్చు. ' ' దీనిని టెల్మిగాఫ్‌ నిగ్నల్‌. సిద్ధాంతంవంటి అనేక సిద్ధాంతాలలో విరివిగా 
అనువ, శ్రీరచడం జరిగింది. దీనిని గురించి 4వ అధ్యాయంలోకూడా చూడండి. 


Tf 3 ల్‌ బీబర్‌ [వ కియ (Weiner Process) * ఇది అవిచ్చిన్న వరామితి, . 
అరిభ్యుక్న | స్థితి అపరణలుగల యాదృచ్చిక (ష్మకియ,. క్రింద పేర్కొన్న లక్షణాలుగల ఏ 


16 యాదృచ్చిక (ప్రక్రియ ఎర్వచసము, ఖు జల 
పృకియ {X,, t= 0 |} అయినా వీనర్‌ లేదా [బౌనియన్‌ Weiner or Brownian 
[పక్రియ అని అంటారు. 

(స {X,t20. స్వతంత్ర పెరుగుదలలతో స్థావర _ప్మక్రియగాను, 

il) (వతి 1 ప 0కు XK సామాన్య ఏభాజనాన్ని అనుసరించే యాదృచ్చిక 
చలరాశిగాన్ను 

(111) X =0,E (న్న = 0. క ఓప0 గాను ఉండవలె. పె లక్షణాల 
దృష్ట్యా t = 5 = 0౮కి సంబంధించి, 

E X,—X,) మ (లవ మ X,) = ౮ (( న్‌ 5), 
లతో KX — xX సామాన్య విభాజనాన్ని అనుసరించే యాదృచ్చిక చలరాశి అని సృష్టమవు 
తుంది. ౫, ౫, లు (3 ౫ ఏ సామాన్య యాదృచ్చిక చలరాశులు అయితే, వాటి సహవి నతి 
వమేయము 


C (s, t) = cov (XK,X)= 2 బరి Xx 
a: | లే న్‌్‌ న T xX : 


E Xx (క్ట ఆ వ +.B (X52) t > 58) 
= 02 (5) = ౮2 min s,t. 


పై 'స) దృష్ట్యా వీనర్‌ ప్రక్రియ కూడా' సామాన్య (వ్మక్రియ అని తెలుస్తుంది, కాని సామాన్య 
ప శ్రియలన్నీ ఏనర్‌ [ప్మకియ కానక్కరలేదు. నిర్వ చనంలోని మిగిలిన నియమాలను పాటించి 
నప్పుడే అవి ఏీనర్‌ [షక్రియలు అవుతాయి. 


(పతీ శాస్త్రంలోను పత్యేకించి భౌతిక శాస్త్రంలో ఏనర్‌ |ప్రక్రియను పెక్కు 
విధాలుగా అనువ ర్రీస్తున్నారు. దీనిని |బౌనియన్‌ చలనము (Brownian motion) నకు 
నమూనాగా పరిగణిస్తారు. [దవ పదార్గంలో మునిగిన ఆణువును మెకోస్కోపు ద్వారా 
పరిశీలిస్తే అది యాదృచ్చిక సామీప్య 'వీడనలవల్ల అవిరామంగా చలిస్తున్నట్టు 1827 లో 
రాబర్ట్‌ (బౌస్‌ (Robert Brown) అనే ఆంగ్ల శాస్త్రవేత్త కనుక్కో వడంవల్ల ఆ అణువు 
చలనాన్ని (బౌనియన్‌ చలనమన్నారు. 


[బౌనియన్‌ చలనంలో ఉన్న అణువు (0, t లో చలించిన దూరం x అను 
కోండి, య = 0 గో భావించి, (5, t అనే కాలాంతరంలో ఆ అణువు కదలే దూరం, 
X ఆ రర, (st “లోని అన్ని క్షణాలలోను చలించిన న్వల్బు దూరాల మొత్తానికి సమానం 
కాబిట్టి క్రేం దీయ సీమా సిద్ధాంతం (ప్రకారం. X —-_X ను సామాన్య యాదృచ్చిక చలరాశిగా 
పరిగణించవచ్చు గదా! అదే విధంగా (3, t లో చలించిన దూరము, X లాల ్ట క్ట 
విభాజనం (పతి ఏ౧ ౦కు ($5 +h, (శ మ లో చలించిన దూరము, x, స. 


యొక, విభాజనము ఒక టేనన్న ఉపకల్పన సరికావచ్చు. ఎందుకంటె, అణువు ఉన్న 
[ద్రవము నమతాస్థితిలో ఉండడం చేత చలించిన దూరం కాలాంతరము t+? hb—-s—h 
=t-5 మై అధారపడి, మన పరిశీలనా పారంభ సమయంపై కాదు కనక (౫, £ = 0} 
ని స్యతం[త్ర వెరుగుదలలు గల |వష|క్రియగాను, [పతి 1 ౫ 0కు Xx, ఆ Xn X ఆ ఎ 
లు ఒకే సామాన్య విభాజనాన్ని అనుసరిసాయి కాబట్టి దీనిని స్థావర [ష్మకియగాను ఊుపిం 
చడం న్యాయంగా తోస్తుంది. |బౌనియన్‌ చలనానికి ఏనర్‌ పక్రియ సమూనా అనడంలో 
అతిశయోక్తి లేదు కాబట్టి వినర్‌ _వ్మక్రియను |బౌనియన్‌ పక్రియ (Brownian motion 
Process) అని కూడ పిలు సారు. 


వూరో్కవ్‌ శృంఖలాలు 


(MARKOV CHAINS) 


ఒక నిర్హిత సమయం ఓ వద్ద భౌతిక వ్యవస్థ (Physical system). ఒక స్థితి 
(5246) లో ఉండే సమాచారం ఆధారంగా భావి కాలము | (-౪)లో అది ఏ స్థితిలో 
ఉంటుందో అని ఊహించగిల శక్తి సాంవదాయ భౌతిక శాస్త్రంలో అవనరమైన అతి 
ముఖ్యమైన విషయము. దిని ఆధారంగా భౌతిక వ్యవస్థను విశ్లషించగల [పాథమిక పద్ధతిని 
నిర్ణయించవచ్చు. నిర్జీత్ర సమయం (t,) లో భౌతిక వ్యవస్థ ఉండే స్థితి ఆధారంగా భూత 
కాలము క్ర (క ై 1) లో అది ఉన్న స్థితితో [ప్రమేయం లేకుండా భావికాలము 1 
(క ~tఇర్క)లో అది ఉండబోవు స్థితిని గురించి ఉద్పాదించడమే ఈ విశ్లేషణా 
పద్ధతి. 

సంభావ్యతా న్యాయాలను అనుసరించే భౌతిక వ్యవస్థలకు పె విశ్హషణా పద్ధతిని 
అన్వయించడం ఎట్టా అంటె: భావికాలము క్క లో భౌతిక వ్యవస్థ ఒక నిర్దీత స్థితిలో ఉండ 
డానికిగల సంభావ్యత, శృ కంటె పూర్వపు సమయము £, (ఇక్క) లో ఉన్న స్థితి మీద 
మాతమే ఆధారపడుతుందేగాని, అంతకుముందు సమయము శ్చ (య t,) లో ఉన్న స్థితి'ె 
ఆధారపడదు. ఈ నియమాన్ని అనునరించే భౌతిక వ్యవస్థల గురించి పరిశీలించిన తరవాత 
ఆ పరిశీలనకు చెందిన నమూనాలకు అన్వయించే యాదృచ్చిక (ప్మకియలను మార్కో_వ్‌ 
[ప్మకియలుగా పిలుసాము. 

ఈ |షృకియలను గురించి ఈ అధ్యాయంలో నేర్చుకొంటాము. 


డి.1 మారోూవ్‌ (పక్రియ - దాని నిర్వచనము 
విచ్చిన్న లేదా అవిచ్చిన్న పరామితి సమితి శ గాగల యాదృచ్చి క |ప|కియ 
[వృ te T}, T= {0, 1,2,...} లేదా [ఓ ౪20 | కింది నియమాన్ని అనుసరిస్తే 
ఆ (ప్మకియను మార్కోవ్‌ (ప్మకియగా పిలుసాము పతి పూర్తంకము nకు t, << కే పీ 
యళ, అయ్యేటట్లు 7 లోని 21+ 1 వరామితి విలువలు t,, b్ర, 1 లకునూ, 
n+l ప) 1” లి n+l 
[పతీ వాసవ విలువలు న్‌ న్య eX లకునూ సంబంధించి, 
PX SX వేష =x) 


n+l n 


= లి (X వ క 


KX =2౫ ) eat 


n+l n 


మార్కోవ్‌ (ప్రక్రియలు _ వాటి వర్షిక రణము 19 


అవవలె. * సమయానికి [పక్రియ స్థితి విలువ ౫, తెలిస్తే, శే సమయానికి ౫ 
n థి n — టనే య్‌ 


n+l 


యన్న సంభవించడానికి €, శ్వ, +... శ్నీ సమయాల వద్ద ఉండే [వ్యకియ స్థితులతో 
[ప్రమేయం లేదు. సూక్ష్మంగా వివరించవలెనంది, [ప|క్రియయొక్క_ వర్తమాన (ఓ) స్థితి 
విలువ (౫) తెలిస్తే, భావికాలం (శ్ర) వద్ధ ఒక స్థితి (క) లో ఉండడానికి గల 
సంభావ్యత: భూతకాలము శ్చ (మ భో n) వద్ద |పృకియ ఉన్న స్థితి (న్న) విలువల ప 
ఆధారపడదు. (2.1.1) ని మారోవ్‌ నియమము (Markov Condition) లేదా మార్కో.వ్‌ 
ధర్మమని వాడుక భాషలో పిలుసాము, [ 


షరతు విభాజన [పమయము (Conditional distribution function) 


F (t,x; tyy)=P (XK SyX, =x) (ti < ty) 
గా నిరంచిస్తే, (2.1.1) 
F (13 శ LT న) = గ ము “ఇష! జ మ్‌ న్స 


, (2.1. లొ 
అవుతుంది. ఈ |పమేయము (పతీ (య ళీ కు సంబంధించిన న ల స్థితి విలువలు ౫, లవె 
ఆధారపడదు. కొన్ని పరిస్థితులలో ఈ |వమెయము భావి, వర్తమాన కాలాంతరము 


t ,-t పెన మాతమ ఆధారపడి ఉంటుంది. 
n+l n— 


నిర్ళంచనయు lA ఇ మార్చో_వ్‌ పక్రియకు సంబంధించిన షరతు విభాజన 
[ప్రమేయము స్థితి విలువలు కాకుండా కాలాంతరము కాక్క -t, (ty < t,) మీద ఆధార 
పడి ఉంటుందో; అంటే 
F(t,x;t, y)=F(t, x, y) పట న ఇ. 
అయినప్పుడు, ఆ మార్కోవ్‌ (ప్రక్రియను సజాతీయ (10108616015) మార్కొవ్‌ 
పక్రియ అని అంటారు. షరతు సంభావ్యతలలో 
P(X మం వళ్ళ = ఇవా 2 (sy =x) 2డీ 
అవుతుంది. 


2,2 మారోగ్రావ్‌ (ప్రక్రియలు - వాటి వర్షికరణము 

యాదృచ్చిక [వ క్రియలను సూచిక సమితి, స్థితి ఆవరణాల లక్షణాల దృష్ట్యా 
నాలుగు రకాలుగా వర్లీకరించినప్టే మార్కోవ్‌ ప్రక్రియలను కూడా 20వ పుటలోని పట్టికలో 
పేర్కొన్నట్టు, నాలుగు రక్షొలుగా వర్గక రించ వచ్చు. 


20 మారో్కోవ్‌ శృంఖలాల్లు. 
అకా (స్మకియల వర్ల కరగా పట్టక 2,2 
స్థితి ఆవరణము జ 


*విచ్చిన్న 
ఏ: {0, 1, 2, ee} 
ఇ { -2,-1,0, ], 2, ee} 


అవిచ్చిన్న . 
ఏ:{2—ద0౨_ష౫ః_చబ!. 











న _ విచ్చిన్న విచ్చిన్న పరామితి ఐచ్చిన్న పరామితి 

ట్ట Te (0, క f మారో,_వ్‌ శృంఖలము మార్కో_వ్‌ (పక్రియ 
రీ 

ft అవిచ్చిన్న అవిచ్చిన్న పరామితి అవిచ్చిన్న పరామితి 
@ | (౨౦|| మార్కోోవ్‌ శృంఖలము - మారోవ్‌ పక్రియ 





ప్రై వర్లీకరణాన్ని బట్టి విచ్చిన్న స్థితి ఆవరణంగల మార్కోవ్‌ (ప్రక్రియను 
మార్కోవ్‌ 'శృంఖలమని పిలుస్తాము. ఎదైనా క్‌ భె” తిక వ్యవస్థను విచ్చిన్న సమయాల 
వద్ద పరిశీలించడం జరిగిందనుకోండి. ఈ పరిశీలనా విలువలు లు షి ప PD ల. 


n+l 


అనే యాదృచ్చిక సంఖ్యలతో సూచిస్తూ, ఇవ సమయంవ ద్ద PEA యాదృచ్చిక 
సంఖ్యను ల అనుకొంటే, త్ను లు యాదృచ్చిక చలరాశులు. Ea n=0, 1, 2, ». | 
యాదృచ్చిక (పకియ, ఇందులోని (పతీ X విచ్చిన్న చలరాశి అయి, మ య n, వ్‌. 
య ష్‌ అయ్యటట్లు, మే; ఏలల9 క్రి a ఆనే Dm పూర్ణ సంఖ్యలకునూ, TE ou గ అన mn 
వా స్తవ విలువలకునూ సంబంధించి కింది మార్కో వ నియమం నిజమయితే, 


P (Xn స! X= జే, గ = పహ. య జ | 
mu 0 || మలా 1 
= P (Xn = xn a = & 11) sel. ల. 
m క్‌. 
లేదా (ప్రత్యేకించి, 
P (శ = హ్‌ న . నం య్య నా న స త్న - న్‌) 
= ఖై (క్ల =x XX ,= I) తష 2) 


(వ 1=0, 1, 2 .... | ను మార్కోవ్‌ శృంఖలమని అంటారు. (2,2.2) నియమం 
పర్యవసానంగా కింది ఫలితాలను సులభంగా నిరూపించ వచ్చు. 


(మ, = 0, 1,2, ee} [ప్యకియి (a 2. 2) వ నియమాన్ని సంతోవ పరిస్తే, 


రీ! 


*మారో_వ్‌ (ప|కియలోని KX లు విచ్చిన్న చలరాశులై - గణనియ అనంతంగా స్థతివిలు 
వలను స్వీకరిస్తే, అంటే 5 విచ్చిన్నమైతే, స్థితి విలవలను పూర్ణాంకాలతో సూచించడం 
పరిపాటి, X =i 1=...., —2, 1, 0, 1, 2», +. అయితే ప|కియ t సమయం 
వద్ధ 1వ స్థితిలో ఉందనడం ఆచారము, 


సంఠమ సంభావ్యతొ ప్రమేయాలు 2 
(2) P(X =x It k=1,2,...sn =] 
తశ జ. Me 
(గ P(X ఆన్న XxX =x, =xik<n) 
=P(X—x AX == క) (k<au. 
(6) విన్న p=, య్తజాశ్మెఫకడా0, 1, మా క్రై 


క (య మ స] త్న స్‌ న్‌ు క న్‌) 


(6) P (Xr = యం య కా న్ను యై x) 
అ ae న An ధా క) PF Xi రా ae య్‌ = క) 


ఆంది, పక్రియ యొక్క వర్తమాన స్థితి (ఇ) సమాచారం తెలిస్తే, దాని భావి, భూతకాలవు 
స్థితులు పరస్పరం స్యతం|తాలు. 


ప్‌ విచ్చిన్న మెనప్పుడు స్థితివిలువలను పూర్ణాంకాలతో సూచించడం ఆచారం కాబటి 

(ఇ 

(2.2.2) లోని ౫-విలువలను ॥ (0h ) లతో నూదిస్కే పె మార్కోోవ్‌ 
నియమము 


౨౫ 


0 4. 12, క! m-9 ల్సి లస = 1) 
వౌ (వట్ట = ఆ. త ఫం. 
ఇక్కడ 1; 119 490 లి గలు అన్నీ ధన పూర్ణాంకాలు. గణిత సొలభ్యంకోసం 
ఈ అధ్యాయంలో [ప కియా గుద్దాంతాన్ని ముందు మార్కోవ్‌ శృంఖలాలకు. వృద్ధిచేసి దానిని 
మారో» వ్‌ [ప[కియలకు సార్వ। తీకరణం చేద్దాము, 
డి.లి సం|కమ సంభావ్యతా (పమేయాలు 
(Transition Probability functions) 
మార్కొవ్‌ శృంఖలము ॥1-వ మెట్టు (step) లో 3 వ స్థితిలో ఉండె సంభావ్య 
తను (౫ తో సూచిస్తే, 
(౧) _ = 1 
న న్‌ P(X, J) 
దీనిని మార్కోవ్‌ శృంఖలం యొక్క_ 1-వ మెట్టు పరమ (20501019) సంభావ్యత ఆనీ, 
Mu (1) (2) (n) 
p (Po Pb, BE ep 
nవ మెట్టు వద్ద మర్కో_వ్‌ శృంఖలం యొక్క ఉపాంత విభాజన మ్మాతిక (marginal 


22 మార్కోవ్‌ శృంఖలాలు 


distribution matrix) అని అంటాము. (పతీ స్థితి 1౬5 P(X =i)>0 అయితే 
షరతు సంభావ్యతను 

స IX, =i)=p,, (m, మ +n 2.3.1 
తో సూచి సే, ర (m, m -- n) ను మారో)న్‌ శృంఖలం న," సం|కమ సంభావ్యతా 
(పమేయమంటారు. M-వ మెట్టు వద్ధ మార్కోవ్‌ శృంఖలం 1వ స్థితిలో ఉందని తెలిస్తే: ॥ 
మెటల్లో అంటే mM + ॥n-వ మెట్టువద్ద J వ స్థితికి సనం కమించె (transit) సంభావ్యతను 
(2.58) తెలుపుతుందన్న మాట. ఇది 1 మెట్ట తరవాత స్థితి నుండి j - స్థితిని ఆకమించె సంభా 
వ్యతను సూచిస్తుంది. (2.8) లోని (పమెయము మామూలుగా సం[కమణ (transition) 
లోని ఆది (initial) స్థితి 1 అంత్య (final) స్థితి J లపెన కాకుండా సం|కమణ ఆరంభ 
సమయము 0 పె కూడా ఆధారపడి ఉంటుంది. కొన్ని మార్కోవ్‌ శృంఖలాలలో శః 
పమేయము సం[కమణ ఆరంభ సమయము ఎ కాక, సంకమణ కాలాంతరము 
mM కన క n) పెన ఆధారపడి ఉంటుంది, అంటి, 


జ్‌ (m,m + n) = ను = మ్మ 2 3.డ 


(పతి 1] ౬5 లకు, ఏ మార్క_వ్‌ శంఖలానికి (2.3.2) నిజమవుతుందో, ఆ శంఖ 
లాన్ని సజాతీయ మార్కోోవ్‌ శృంఖలము (homogeneous markov chain) అనీ, 
P.. 9 లను సజాతీయ లేదా స్థావర సంకమ సంభావ్యతలు (5620108297 transition 
probabilities) అనీ అంటారు. 

మనం పరిశీలించే మార్కోవ్‌ శృంఖలాలు చాలావరకు సజాతీయాలు కాబట్టి 
ఈ అధ్యాయంలో వాటిని గురించే సమ్యగంగా చర్చిస్తాము. సజాతీయ మార్కోోవ్‌ శృంఖ 


లాలలో (పతీ 13 ధన పూర్ణాంకానికి 
P (X =jX =ij)=p,=P(X =X =i) 


m +n 
ఆవతుంది. (పత్యే కంగా n=1 అయినపుడు ఫ్య =p.‘ వాసి, P;, ని 1వ మెట్టు 
నం|కమ సంభావ్యత (one step transition probability) అనీ, Pu ని [-వ మెట్టు 
సం[కమ సంభావ్యత ఆని కూడా అంటాము. 

ఇదేవిధంగా అవిచ్చిన్న పరామితి మార్కోవ్‌ శృంఖలము {X, t —> 0, కు 
సంబంధించిన సం|కమ సంభావ్యతా [ప్రమయాలను నిర్యచిసాము. (పతీ (౨౮౦కు, t నమ 
యాన మార్కప్‌ శృంఖలం J - స్థితిలో ఉండే పరమ సంభావ్యత ఫ్రై) =P(X =) 
గాను, 5 (= 0) నమయాన | స్థితినుంచి 1 (> 5) సమయానికి మారో ప్‌ శృంఖలము 
)-స్థితిని వవేశించు నర్యకమ సంభావ్యత 

Dp; (»,t)=P(X=jX =i) 

గాను, (ర్చి 12 0) నజాకీయ మార్కోవ్‌ శృంఖలమయితే, పతీ 5 = 0 కు, 


సంక్రమ నంభావ్యతొ ప్రమేయాలు 3 


PK -iX=ij=p®=P(X=iX =i 


వ్‌ + 0 


గొ (వాస్తాము. 


సం|కమ సంభాప్యతా మా తిక (Transition Probability matrix : 


విచ్చిన్న పరామితి మార్కోవ్‌ శృంఖలానికి సంబంధించిన 1-మెట్టు సంక్రమ సంభా 
వ్యతలను మా|తికా రూపంలో వాయడం ఆచారము. దీనిని P = P;;) i,;j=0, 1, 2, 
తో సూచిస్తే 


/ Poo Poy Pog క్‌ లిన Po; wee 


Po Py Pig “Py 


= 4.2.3.4 
P Pa Poy ర్ట ౨౨ Py ఒం 2.3 
p 


(| i Pia మ్య 
ఈ అనంత చతుర[న మాత్రిక Pని మారో-వ్‌ లేదా 1-మెట్టు సంక్రమ నంభావ్యతా మా(తిక 
(1 - step transition probability .matrix) అని ఆంటారు. దీని మూలకాలు 
(elements) P;, కింది నిబంధనలను తృ పీపరుస్తాయి, 


i) p20 Wiies 
() ల్స్‌ స్థా = 2.లి,5 
(1) నె P;; | ies ) 
j€5S 


అంటే, P లోని (పతి పం కి (Tow) లోని మూలకాల మొ తం ఒకటికి సమానము, 
ఇదే విధంగా n - మెట్టు సం|కమ సంభావ్యత లను మా,తికా రూపంలో [వాయవచ్చు. 
దీనిని P= (స్య ఎ = 01 2, ... తో సూచిస్తే, 
ij 


(n) Bi Peg వ Poy ప \ 


n) (2) య. (01) 
Pio P| Pig Pi 


pn) = nM) ee Pass. త si రీ 


| వ్‌ (1) (ు ఇ అ 4 ల్‌ 0 
Po Py Pg P;; 


ఈ. ఈ 
క చ తః క్ష అశ శి * | 
జు - | 
న్‌ a 
© 


24 . . మారో+వ్‌ థృంఖలొటు 


matrix) అంటూ, దీని మూలకాలు గ, కింది నిబంధనలను తృ వ్రీపరుస్తాయని (గ్రహించ 


వచ్చు : 
(1) క లై 0 ( £1, ] “వ S స పైగ , (. 
క్‌ | 9.97 
. య్‌ | ( క 63 ఆ 
ii) >, he 1 HES J 
jeS 


ఇప్పుడు P, ౧, టు మాతికల మధ్యగల సంబంధాలను పరిశీలిద్దాము. ముందు 
వివిద మెట్ల సం|కమ సంభావ్యతా పమేయాల మధ్యగల |పాథమిక సంబంధాన్ని నెలకోల్పు 
దాము. (పతి పూర్ణాంకాలు n,m >0, (పతి 1 ) € 5 లకు సంబంధించి 


ర జ స Pr; (m) .°.2.3.8 
ద 


(2. 3.8) ని చాప్‌మెన్‌ - కొల్ళో|గోవ్‌ (chapman = kolmogorov) సమీకరణమంటారు. 
దీనిని నిరూపించడానికి, es 


[0 (మము = =P(X =] X =i) 


n +m 


= నె P(X  “hX = క వట 


కాల) చావ (క జాలి 
15౬5 


= 2 PS న్నక కునే =) 
వ. kes . 
P(X =kX=i}~P(X =i) 
కాని మార్కోవ్‌ నియమము (2.1.1) పర్యవసానంగా 
2 (౫ 


వా. X =kX =ij=P(X =] X = k) 


n +m nm -t+m n 


= (mM 
Pr: 
Yas =" = == — 17 — ) 
P(X =khX =) P(X =i)=P(X =k¥ Xx =i) hi 
వీటిని పె సమీకరణంలో (పతిషేవించి చూస్తే (2.8.8) వస్తుంది. (పత్యేకించి ఏదైనా 
పూర్ణాంకాలు 1, 1 (n a le 0), [పతీ 1, ) ౬5 లకు నంబంధించి, 


p= 5 pp 2.8.9 
15౬౯5 


ఇక్కడ మ్య =ల్యి వా 1 కాప 


సం(క్రమ 'సంభావ్యతా (ప్రమేయాలు 25 
ఇదేవిధంగా వైజాతీయ (n0On-homogeneous) మార్కోప్‌ ' శృంఖలాలలో సం|కమ 
సంభావ్యతా [ప్రమేయాల మధ్య చాప్‌మెన్‌ -కొల్మో[గోవ్‌ నమీకరణాన్ని నెలకొల్పగా, పతి 
i,j €5 లకు, (పతీ పూర్ణాంకాలు 1, 1. 2 (0 యక్రష[మ ళు మ) లకు సంబంధించి, 


rm)= 2 py (rn). py, (n,m) 23.30 
1౬5 


అవుతుంది. 


ఇప్పుడు Pp, Po) మా|తిక ల మధ్యగల సంబంధాన్ని పరిశీలిద్దాము. A= =(&,,) 
B= (b,) లు వరసగా P౫1, 1౫4 ఆర్డర్‌గల రెండు మా| తికలనుకొంచే, 'వీటి 
లబ్ద ల Ce SPE (c, ;): దీని ఆర్డరు ౧౫౦. మా తికా సిద్ధాంతం ప్రకారము 


I 
౦లోని 1 ) మూలకము ర్మ, = ౫ జ్య ర్య ఆంది ర్య, 4& లోని 1వ పం కి, లోని 
కా! 
1వ దొంతు (column) ల లబ్లానికి నమానము. ఈ విషయం దృష్ట్యా (2.3. క .ను 
పరిశీలి సే, ౨) లోని 1వపంక్రి, pin- =) లోని ) వ దొంతుల. లబ్దము pa కు, అంటి 
ఆ లబ్ధము po లోని "(3 j) మూలకానికి సమానమని |గపాంచవచ్చు. దినిని బట్టి . 


p(n) = Pp) . pa-7) 2.31 
[పత్యేకంగా, 
08) = ని) , pl) = ౨౨ |“. pit) అ Pb) 


08) = p® , pl = 28 


pn) = (2-1) , Pl) = pn, ప్రజ 2 


(2.3.12) దృష్ట్యా మెట్టు నం[కమ సంభావ్యతా మాాతిక 1 _ మెట్లు నం|కమ సంభావ్యతా 
మా తిక యొక్క ౧వ ఘాతానికి సమానము. అందుచేత మార్కోవ్‌ శృంఖలానికి సంబం 
ధించిన P తెలిసే (2 3 12) ఆధారంగా దాని Pగ లేదా ష- మెట్టు సం|కమ నంభావ్యత లను 
కనుక్కోవచ్చు, 
ఇస్ర P), P మ్యాతికల మధ్యగల సంబంధాన్ని పరిశీలిద్దాము. నిర్వచనం 
(ప్రకారం 1 సమయాన మార్కోవ్‌ శంఖలం ఉఎాంత సంభావ్యత లు | 
సరి =r) rh =) 
16౬5 
hs P(X =i). FP బ్‌. చేర్చి =i) 
1౬5 


26 ఫ్‌ | మార్కవ్‌ శృంఖ లోలు 
— > p.0) . DP. (2) 
ies 
అంటే, 9 లోని j వ మూలకము ౧,౫, పంక్తి మాత్రిక P09, PM) లోని), వ దొంతుల 
లన్ధానికి సమానము. 
pm = p(0) pm = 0.0) pn we 9,3.13 


ఇక్కడ X యొక )_ ఉపాంత విభాజన మాతిక po) కాబట్టి (2. 3. 13) ఆధారంగా, X 
యొక్క ఉపాంత విఖాజనము (0, P మ్మాతిక తెలి గే స్తె, 'మార్కో_వ్‌ శృంఖలంలోని ఏ 
యాదృచ్చిక చలరాశి గ (1. ౮0) యొక్క- ఉపాంత విభాజనాన్ని నిర్ణయించవచ్చు. అంటే, 
శృంఖలం ఆది విభాజనము (initial distribution), P లతో పరమ సంభావ్యతలు P, (n) 
n> 0) ను ను కనుక్కో గలము. 


ఉదాహరణకు స్థితి అవరణము ఏ5 = (0,1)గా గల మార్కోవ్‌ శృంఖలంయొక్క 
1-మెటు సంక్రమ సంభావ్యతా మా|తిక 


12 a ' 
P = య  O0OsSab<al, 1—a—b <1 2.3.14 


అయితే, ॥-మెట్టు సం|కమ సంభావ్యతా మా।త్రిక వై) ను కనుకో_వడం పరిశీలిదాము. 
Oo 
(2.8.14) నుంచి 
(1) వం అవా ( ) — పాం! 
0. చెలం పా జ పె గు 
[మ a (1) — క UE 
Pio =py=b Pr; Pi 1-0. 
2.3.9 దృష్టా, 
(N= క్‌ ( -1 
Po Po "Po క. 
= (1 హే 2) ప అ b wy 
అర నమస తళ లల క్మకోనే 
—b+(1-—a—b)pp™™" (n>1) 
ఈ ఆవ్య త్తి సంబంధాన్ని ఉపయోగించి వరసగా వాసే, 


Po =bt(1—a)(l—a~b) (py Dm 1-2) 


Peg: =b+Tb(1—a—b)+(l—ay(1— 2 - bb} 


ఖ్‌ 
థ 


సం[కమ సంభావ్యతౌ (పమేయాలు 27 


ఖు |! 
a శ 


po =b+b(1—a—b)+...+b(1-a— br 
+(1—a)(1—a— by! 


n—2 
= 2, (1-a-by+(1—a)(1—a— by 


r=0 
1—a-—b <I అయినప్పుడు, 


Liha గో 


త: [ఆ గజా? అ టార్‌? 
_ b sat Tern 
a-Fb a+b 


_ b FY ఓ 
a--b a--b 


(1— a— by". 
ఇదేవిధంగా Dr కు కూడా ఆవృత్తి సంబంధాన్ని నెలకొల్సి తే, 
రభ = (1 ప a) Pr ఆ b pry 
జా + (1-2 -- సి క్కి! 
దీనిని బటి p.. నిరయించండి. చివరకు 
బట “10 ర 


Po” TP bP TPH 


ల దృష్ట్యా P%) లోని మిగిలిన రెండు మూలకాలు Pas 91 ను కూడా కనుక్కొాం౦టె, 








AE ఆ న 1—a—b} 
Wren అటా! 
Pm) = 
b b 
REA 1.2 bin 
a+b a-+-b ( ల b) 
a a |. 
Meta (Leesa Db) 
a-- b a--b 


+ =బీ.3.15 


a 


b 
షష +t (టా 2ాా రం, 
a-Fb a )) 


బరీ సం”. మార్కోవ్‌ శృంఖలాలు 
NWS ఎ L~a—b ఉ 1 "కాబట్టి ౧ --౨* 0 అయితె 


(1-2 ఆక 0. | 








/ b a 
2+- 2-7-0 
Lt PM = అవుతుంది. క ళల 
గాయ b a 


a-tfFb a-Fb / 


2.4, మారోవ్‌ ల న సంభావ్యతా విభాజనాన్ని వర్షించడం 


న [ప[కియనై నా సంపూర్ణంగా విశ్రషించ వలెనం టే, దానిలోని ఏ 1 యాదృచ్చిక 
చలరాశులదై నా సంయు "ర్‌ ఐభాజనాన్ని సమ(గంగా పరిశీలిస్తే చాలని అనుకొన్నాము గదా! 
మార్చో_వ్‌ ' శృంఖలపు గమనాన్ని వర్ణించడానికి దీనిలోని 1 (1 య) విచ్చిన్న యాదృచ్చిక 
చలరాశుల సంయు క్ర విభాజనాన్ని ముందు కనుకో)_వలె. దీన్ని నిర్ణయించడానికి మార్క్కోవ్‌ 
శృంఖలం యొక్క ఆది ls pO) P ie అవసరమని నిరూవిద్దాము . దీనిని 
రెండు దశలలో చూపుదాము: 


యంలో దొళ * మారో వ్‌ శ్చంఖలం (వన్ని, n=0, 1, 2, «ox } లోని 


X, వ, లయ ల సంయు న నం. p> Po అ కా ee విధా 
నాన్ని అకటా. 


(పతీ ధన పూర్ణాంకాల సమితి, (i+ i, re i.) కు నంబందించి x, x 
+౫ ల సంయుక్త నంభావ్యతా విభాజనము 


P (X = i» X, = 1, hares X .=1) 

=P(X =i X hs OE 

P(X =i X =i, గ 1) 
2.1.1 నియమం |పకారం 

తప Xs LTT 1) 

= వర్న కన్నే చర్మ కాన్న) = షా i 

PXK= i; X =i, X, =i) 

=P(X =i, X, = 13 XK, = 11) Pi i Be | 


(2.4.1) ని గణితానుగమన రీతిలో (వాస్తే, 


మారో్కో-వ్‌. శంఖలం..యొక సంభావ్యతా విధాజనాన్ని వర్థించడం 28 


rN - 
ఇట "వె 1] Pi, 13 «Pi; 1 క్ష ses 
అ స్‌ త 2 స 


ఇలా లాడు. 
అయా 


మార్మోవ్‌ కృంఖలంయొక్క "సంక్రమ హు I fF, Xx wes 


సంభావ్యతలు P (X, = i) తెలిసే XX, X © సంయు క విభాజనాన్ని కను. 
కావచ్చు. 


రెండవ దళ  మార్కోవ్‌ శృంఖలము (౫, 1=0 1, 2,... } లోని 
ఎవైనా k (<< య) (యాదృచ్చిక చలరాశుల సంయుక్త విభాజనాన్ని కనుక్కొౌందాము. 


nh, చ Ha << ౨9౪ nr అయ్యేటట్లు స Nn.» త న లు k ధన పూర్ణాంకాలు, [పతి 


ధన పూర్ణాంకాల me fi 9 5 త 4) స్వే! క్రి సంబంధించి, X ఏ. ఇ 6 ౨9 xX అ సంయు క 
. ,- ny ny — 
విభాజనము : 


= 


స శ — 1, ౨ శ 809 శ 1 = ర. గ్‌ చు 1) 


శః జ 
P [2 an Hae nn ఇ uu చ జ్‌ క స! 
య 48 పా నా. 
లర; x ‘P =] = 1 
[| 0, k క 
" న k 1] 
i ట్ట టం క అ 


ee 


Dl: ] సయమం Marae 


Pw © (ప్ప ప ప చ జి HR i=) 


= ఫై (న్నే = 1 ష్య 


k k-1 kz=t kk 
| Dl 'p Ky = 1. X — ల ve XK =]. సి — ] 
(న "DD 2 ల gp k-1 మ్మ జ) 
జాతా X =| XxX =] ఇ 6 8 X =] లా అ [0 శ 


పంక పె 


2.4.3 ని Hass రీతిగా" వాస్తే, సయయక క విభాజనము 


| x బా i, 


se x x =i) 
గే Ho 


శి 809 క 


వ సలల ల. 024.4 


అవుతుంది. (2.4.4) లో కుడివైపు లబ్ధంలోని కారకాలన్ని అనేక మెట్ల సం|కమ నంభావ్యతా 


ఏ0 మార్కోోవ్‌ శృంఖలాలు 


_ప్రమేయాలకు చెందినవే. మార్కో_వ్‌ శృంఖలంయొక్క P మాతతిక తెలిస్తే, ఈ |పమేయాలను 
(2.8.12) ద్వారా కనుక్కోవచ్చు, ఇదేవిధంగా (2.3.13) ద్వారా Pp, P మాత్రికలు 
తెలిస్తే ఉపాంత సంభావ్యత ఖై Pa = 1) ను నిర్ణయిస్తాము. కాబట్టి మార్కోవ్‌ శృంఖలం 
యొక్క P మాతిక, దాని ఆధి విభాజనము pp) తెలి స్తే, శృంఖలంలోని ఏవైనా Kk 
యాదృచ్చిక చలరాశుల సంయు క్త విభాజనాన్ని నిర్ణయించి, దాని గమనాన్ని పరిశీలించ 
ఏలగును, 

శె సిద్ధాంతం దృష్టాః మార్కోవ్‌ శృంఖలాన్ని సంపూర్ణంగా విశ్షేషించవలెనం టే 
దానికి సంబంధించిన P మా(కతికతోసాటు, ఆది ఉపాంత విభాజనము p కు చెందిన నమా 
చారం కూడ తెలిసి ఉండ వలె. 


4.6 మార్కోవ్‌ శృంఖలాలకు కొన్ని ఉదాహరణలు 

సామాన్య భౌతిక, బీవ, ఆర్థిక దృుగ్విష యాలను మార్కోవ్‌ శృంఖల నమూనాల 
ద్వారా వర్ణించడం వల్ల పై సిద్ధాంతానికి పాముఖ్యత పెరిగింది. ఈ శాస్త్రీయ రంగాలలో 
మారో»వ్‌ శృంఖలాల అనువ ర్రనీయ పరిస్థితులను కొన్నిటిని పరిశీలిద్దాము. 


దంల నృంలోం[తో నమ బిభాజనోంగల యాద్భబ్భిత చోలతా థల నంకోలనొన్చి 

మాలో బ్‌ శృంఖలంగా చూవడం ౩ వన్ని, 1= 1,2, కీ... = ను న్వతంత్ర సమ 

విభాజనంగాగల ఎచ్చిన్న యాదృచ్చిక చలరాశుల అను కమమనుకోండి. లీ లు సీంకరించే 

విలువలు 1 = 0,1,2,...3 వీటి సమ విభాజనము P (X=i =a, a, > 0, Y a.=1 
ళ్‌ 1 


1 
పై 


అనుకొందాము. హ్‌ iy X తో. సూచిస్తే, “క్‌, n= 1, 23... ప్రక్రియ మార్కోవ్‌ 
శృంఖలం అవుతుంది, (పతీ ధన పూర్ణాంకాల జత 3కు 


P (వూ + వ వా i =P Le =) -i)= P X= j . i) 
ఈ సంక్రమ సంభావ్యత సంకమ సమయంపె ఆధారవడదు కాబట్టి 
స స 


మా! VJ 


Yj 2 i 


{5 n=1,2,... | సజాతీయ మార్కోోవ్‌ శృంఖంం అవుతుంది. దీని మార్కోవ్‌ 
మా త్రిక 
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0 0 a a 


శై వ్ల ళ్‌ న్‌ + 
అ ళ్‌ 
కా @ 


/ 
X యొక్క సంభవ విలువలు అన్ని పూర్ణాంకాలు అయితే. వ్‌, స్వీకరించే విలువలుకూడా 
అన్ని పూర్ణాంకాలు అవుతాయి కాబట్టి (క్మ్‌, 2 = 13 2, ౨... యొక్క స్థితి ఆవరణము 
S=. 3-2 —1, 0 1,2, ....X ల నమవిభాజనము P =| కాళ 
i=0,thbh.sa,=06,౫%2,=1. దీని సంక్రమ సంభావ్యతా మా|తిక 


జ్య ౬, 2] a, 4. 

P = ee a9 2 జ్య a 
ః 6 డ్య 4, 2 డ్య ల 

\ | 


బి.ల్‌.దీ నరళరోఖబీద “'యాద్భబ్భిక నడత (random 21k )* : యాద్భృ 
చ్చిక నడక పై సమ్మగ చర్చను ఆవగాహన చేసికోడానికి, పరిశీలించే ఒక వ్యవస్థ స్థితులను 
చలించే అణువు (particle) స్థానాలతో పోల్చి ఊహిద్దాము. ఈ అణువు చలనాన్నే యాదృ 
చ్చిక నడక అంటూ, దినిని మార్కప్‌ శృంఖలంతో రూపకల్పన చేయడానికి |పయత్ని 
ద్దాము. 
అణువు ఓక యూనిట్‌ దూరానికి (ఎడమ వెపునకు గాని, కుడివె పునకు గాని) 
దూకుతూ (jumping) ఒకే సరళరేఖపె చలిసోందని అనుకొందాము. నడకను [పారంభిచే 
టప్పటి దాని ఆది స్థానాన్ని Xx తోను ॥ వ ప్రతి (jump లో చలించిన దూరము ౫ 
తోను నూచిసే X లు న్వతం్యత సమ విభాజనంగాగల విచ్చిన్న యాదృచ్చిక చలరాశులు 
అవుతాయి. ॥-ా ఫ్లుతుల అనంతరం ఆణువు చలించిన మొత్తం దూరాన్ని వ తో సూచి సే 
క =X +X +. TX, 250, 1, 2, . =. (పక్రియ విభిన్న స్థితి ఆవర 
ణంగల మార్కోవ్‌ శృంఖలమవుతుంది. కొన్ని పుతుల అనంతరం అణువు 1వ స్థితిలో ఉండి, 
తరవాత ప్రతిలో (1 + 1) వ స్థితిని గాని (i — 1) వ స్థితిని గాని చేరడానికి సంఖావ్య 


* ఇందు ఆస క్రిగల చదవరులు వివరాల Random walk by Spitzer (1964, న్ను 
సం|పదించ డి. 
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తలు , 6(0+6%= 1 అయ్యేటట్టు) అయితే, (పతి పూర్ణాంకం 2 > 0 కుం 
చ న్‌ క =1)—P 
టు నా లకి 
ఆంటి, P(X. = 1) =p, వి (X= లా 1)= q అవుతాయి. 
మ శె బర్నోలీ విభాజనాన్ని అనుసరించే. యాదృచ్చిక చలరాశులు అయితే, 
{హం n= 0, 1, 2,... | ను సాం| పదాయక యాదృచ్చిక నడక (classical random 
walk) ను నూచించే సజాతీయ మార్కోవ్‌ శృంఖలమంటారు. దీని సంక|మ సంభావ్యతా 
[ప్రమయము 


క = రై, నా 
= 4 నా —™™— — 


=0, (పి >I 
అవుతుంది. | 
గ) నిర్భంధంలేమి యాదృచ్చిక నడక "Unrestricted random walk) : 

ఒక సరళ రెఖ మీద అణువు వాద్దుల మధ్య కాకుండా ఇరువైపుల ఎన్ని యూనిట్ల 
దూరమైనా చలించగలిగితే, వ్య, 1=0, 1, 2, .*.} అణువు యొక్క నిర్భంధంలేమి 
నడకను సూచిస్తుంది. దీని 1 - మెట్టు నంక్రమ నంభావ్యతా [వమేయము 


{ క అ 
వ్‌ P(S చం. ప= i " 
త నస భా =j—i 
పతి n౫-౦0౦క్కు 
Ra ST న స జు 





కాబట్టి ర్య) = Pn తులలో య యు. వ సతులు కుడివె పుకు, 
మా)? | 
2 ప్పుతులు ఎడమవైపుకు చలించడం 
n= సరిసంఖ్య అయినప్పుడు, 
[pp nn 1 
క మ itsal  pati-i/2 qm-i+i)/g 


| 2 / 
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n బేసిసంఖ్య అయినప్పుడు, 
క = 0 అవుతుంది. 


(పత్యేకించి n నరిసంఖ్య అయితే, 


nn 
p (nN) = pq u/2 
00 n 2 , ( ) 
' 2 
లేదా న = (pq)" 
n 
క J 
స్టెర్సింగ్‌ (Sterling) ఉజ్హాయింపు [ప్రకారం 
(&pa)" 
కస చ 7 aang DO 
/ ట్‌ 


B నిర్పంధకర యాదృచ్చిక నడక (resricted random walk 


పె విధంగా కాక రెండు హద్దుల మధ్యనే అణువు యాదృచ్చికంగా నడిస్తే దాని 
నడకను నిర్భంధకర యాదృచ్చిక నడక అంటారు, ఈ హద్దులు 0, 2 అనుకోండి. ఇక్కడ 
a ధనపూర్జాంక ము. అప్పుడు ఆణువు వివిధ ప్రతులలో 05. 1; 2 ssa స్థానాలలోకి 
[పవెశిస్తుంది. కాబట్టి ఈ; స్థానాలు {వ n= 0 1, 2,4. | కు సంభవ స్థితులు 
అవుతాయి. అందుచేత ఈ మార్కవ్‌ శృంఖలం - యొక )_ స్థితి ఆవరణము 


5 = 011, ల... 2 2 | అవుతుంది. 


అణువు 0 గాని, & స్థానాన్ని గాని చేరేంతవరశే నా నడుస్తుందని 
అనుకొందాము. ఈ హద్దుల దగ్గర దీని [ప్రవర్త baba వివిధ మార్క_వ్‌ శృంఖలా 
లను చెప్పుకో వచ్చు. 

(1) రెండు విలీన వాద్దులు (absorbing barriers) తో యాద్భృబ్బీ క నోడ్‌: 
అణువు 0, 8 ల మధ్య ప్రతులలో చలిస్తూ, 0, & లలో ఎరైనా ఒర హద్దులో (పవెశించ 
గానే ఇక కదలకుండా ఆ స్థానాన్నే అధిస్ట్రంచి ఉంటుందనుకొందాము. అంటే సం్యకమ 
సంభావ్యతలలో 


Poo = 1, a = క్షే 


=q,p,,|™P ఇ. 1క?క 21 


అప్పుడు 0, 2 హద్దులను యాదృచ్చిక నడకకు విలీన హద్దులు (absorbing barriers 
3 
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అంటారు. రెండు విలీన హద్దులు 0, 2 గా గల యాదృచ్చిక నడకను రూప కల్పన చేసే 
మార్కొవ్‌ శృంఖలం మార్కోవ్‌ మా తిక 


అంత్య క 
, 0 1 2 3 డా a—1 aq 
ఆది నికి 
@ - 
కే 
0 1 0 0 0 హా 0 0 0 \ 
1 q 0 p 0 0 0 0 
2 0 gq 0 p . 0 0 0 
P= 3 0 = క : . : 
a-—1l 0 0 0 0 ... q 0 hp 
a 0 0 0 0 శ 0 0 1 
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జూదపు ఆటలో జూదరి సంపాదనను కై యాదృచ్చిక నడక ద్వారా వర్ణించవచ్చు. గీ B 
అనే ఇద్దరు జూదరులు వరసగా ౫, ౫ మొత్తాలతో ఆట కుప|కమించారను కొందాము. ఇద్దరి 
మొత్తము ౫ + y = & యూనిట్లు. వతిసారి ఆటలో ఎవరో ఒకరికి గెలుపు తథ్యమని, 
(పతి గెలుపుకు ఒక యూనిట్‌ ధనాన్ని గెలిచిన వారికి ఓడినవారు ఇసారనీ అనుకొందాము, 
ఒక ఆటలో నెగ్గి (ఓడి), A ఒక యూనిట్‌ ధనాన్ని గెలుచు (పోగొట్టు) కోడానికి సంభా 
క. ౧0 ౮) త య అంటే ఇవ ఆటలో గీ యొక్క సంపాదనను X తో 
సూచి స్తే Bata 


కన్న నా Tlj=pPXK=—-1l=e(p+Ta=1) 
x = న కాబటి 1 ఆటల ఆనంతరం తీ యొక్క. ధనము5 =X IX (లా చెలి 
లట ౮౮ n 0 1 n 
అవుతుంది. అప్పుడు 5 యొక్క ధనము 2 -- 5 అవుతుంది). 5 = 0 అయినప్పుడు, 
ఆట ఆగిపోవడం, 4 'నాశని (ruin) మవడం; 5 =2 అయినప్పుడు, ఆట ఆగిపోవడం, 


B నాళ నమవడం జరుగుతుంది. {5 n=0, 1, e+} ని “జూదరి నాశన' (gamMbler's 
ruin) [ప్మకియ అని వీలుసారు. 


ii) రండు మళ్ళిగొటు వాద్దులు (reflecting barriers) గల ల యౌద్చబ్ళట 
నడక : అణువు 0, & హద్దుల మధ్య చలినూ, “a—1” స్థానం నుంచి ' హద్దును చేర 
గానే మళ్ళగొట్టబడి మళ్ళా “2 -- 1” ని పవేశించడం గాని; లేదా “1” Fs నుంచి 
“0” హద్గును ప్రవేశించగానే మళ్ళీ తిరిగి “1” ని చేరడం తథ్రకిమయిలే, 0, 2 హద్దులను 
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యాదృచ్చిక నడకకు రెండు మళ్ళ గొట్టు హద్దులు (1౪160108 bairrers) అంటారు. 
సం[కమ సంభావ్యతలలో EF 


Ba tr Day జ. 


aa—l 


Pri ™— Pp, Py కా qd, (p+a=1, sls 2 1) 


దీని సం|కమ సంభావ్యతా మా।తిక 


0 1 2 3 ఎండా 1 a 
/ \ 
0 0 1 0 0 0 0 
1 10980 o 0 
P= 2 0 q 0 p 0 “0 wi 
శ ర 0 0 0 .. 0 Dp 


బ.ల్‌.లి బిబ్బిన్న వ్యా (ఇ181౭) నోయునా : టిక్కెట్‌ కౌంటర్ల దగ్గర, ఆఫీసు 
లలో విచారణ కౌంటర్హ దగర, ఆటో మరమ్మత్తు షాపుల దగర, 'ెల్మిగాఫ్‌ ఆఫీసు కౌంటర్ల 
దగ్గరు బస్సుస్టాండు వద్ద సేవ (5617106) కోసం వరసలలో నిలబడి నిరీక్షిస్తున్న 
మనుషులనయితేనేమి, అనేక రకాలైన శకటాలనై తేనేమి మనం సాధారణంగా గమనిసాము. 
ఈ వరసలను మామూలుగా క్యూ” (queue) లు అంటాము. ఇక్కుక టిక్కెట్స్‌ ఇచ్చేవాచ్ట, 
విచారణ ఆఫీసర్దు శకటాల మెకానిక్స్‌ వంటివారిని “సేవకులు. (5677613) అంటాము. 
మామూలుగా ఒకొక్క క్యూకు ఒక రుగాని, ఒకరికం చె ఎక్కుున సెవకులుగాని ఉండవచ్చు. 
బాంకుల వంటి సంస్థలలో ఒకేమాదిరి సేవకు రెండుగాని, ఎక్కువగాని సేవకులు, వారికి 
చెందిన క్యూలు ఏర్పడవచ్చు. అట్టాంటి క్యూలు ముందు వచ్చిన, వారికి, ముందు సేవ, 
'ఆఖరున వచ్చినవారికి ముందుసేవి, “ముఖ్యులైన వారికి ముందు సేవి, వంటి ఏదైనా 
నూ|తాన్ని పాటించవచ్చు. కాని ఒకే సేవకుడు, “ముందువస్తే ముందు సేవి అనె నియమాన్ని 
హైటించే అతనికి చెందిన ఒకే క్యూను మాత్రమే ఇక్కడ మనం పరిశీలిద్దాము. పతి 
n= 1 కి సంబంధించి ౧వ థాతాదారు customer) కు సేవ జరిగేటప్పుడు, అంటే nవ 
సేవా సమయంలో క్యూలో (ప్రవేశించిన నూతన ఖాతాదారుల. సంఖ్యను ర్న తో. సూచిస్తే, 
౮, Uy; ౮౪, === లు స్యతం|త్ర సమవిభాజన యాదృచ్చిక చలరాశులు అవుతాయి. ఏటి. 
సమ విభాజనము 


1 


P (ఒకరి సేవాసమయంలో క్యూలో ప్రవెశించిన నూతన కాతాదార్జ సంఖ్య, 
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యా 
U=R)=a;k=0 1,2,3 క్వి =0, వ జ్ఞా! అనుకొందాము. 


1 వ ఖాతాదారుని సేవ పూర్తి అయ్యేటప్పుడు క్యూలో నిరీక్షిస్తున్నవారి సంఖ్య 
ల్ని అయితే, య్య xX, 5 లు ఆయా సేవాసమయాలలో నిరీక్షిస్తున్న క్యూ 


పొడవులను సూచించే యాదృచ్చిక చలరాశులు. ఇవ్వడు (౫ n=1,2,....(పక్రియను 
పరిశీలిద్దాము. ఇక్కడ . 


క |=క్యూలో (2 1 1" -- వ ఖాతాదారునకు వెనకనున్నవారి సంఖ్య 


n 


+ అతని సేవాసమయంలో క్యూని [పవెశించిన నూతన కూ తాదార్ల సంఖ్య 
న్‌ (శ —1 ui Vea 
కాని చేష్ట =0 అయితే గద, (n+! సేవాసమయంలో వచ్చిన నూతన థాతాదార్భ 


నంఖ్య ౮ ,, అవుతుంది కాబట్టి ఇట్టాంటి క్యూ నమూనాను కింది విధంగా [వాసాము, 


XK జన్య —0(X)+U,,, ... 
ఇక్కడ d(x క్షే x= 0 


= 0, x= 0 


ల యాదృచ్చిక చలరాశి ష్య, చర్మ, ...3 చ్చీ లపై ఆధారపడదు. ఎన్ని తెలిస్తె ఎమ్మ 
పరిశీలనకు ౫, ౫ ,.., వర్న ల సమాచారంతో వనిలేదు. కాబట్టి (2,2 = 1,2, . 
[పకియ మార్కోవ్‌ శృంఖల మవుతుంది: దిని నంకమ సంభావ్యతా (ప్రమేయాన్ని కను 
కొ-9దాము. 


,"i>0 అయితే పతి j 0కు 


P(X |= XK =1 (యా కే 8! 
X =౦0 అయితే, పతి j=౦0కు 
BR. 


Pp (న్న 


క స జ చే 2, 

ఈ (ప్రమేయాలు సంక్రమ నమయము £ మీద ఆధారపడలేదు కాబట్టి (ర్న, 2 = 1,2, ...} 
సజాతీయ మార్కోప్‌ శృంఖలమని గమనిద్దాము. ఇక్కడ 

లా హ్‌ 10 


j 
j>i>0 


EF క 
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ఈ సజాతీయ పూర్కో_వ్‌ శృంఖలంయొక్క_ Pp మా[తిక 


a a, షర డ్య 98 
డె a డి బ్య RE. 


అవుతుంది. 


2.8.4 బిబ్బి న్న (బాంబింగ్‌ (branching) (వ/శతీయ : ఇప్పుడు పునరుత్పత్తి 
చయగల బజీవాణువుల సమూహాలను పరిశీలిద్దాము. పారంభంలో సౌలభ్యం కోసం ఈ 
బీవాణువులకు ఒక దానితో మరొకటి [ప్రమయం లేకుండా వాటి జాతి వ్యా వ్రికోసం పున 
రుత్ప త్తి చేయగలవని ఊహిద్దాము. ఎదైనా ఒక జీవి తన జీవితకాలం (life time) లో 
యాదృచ్చిక సంఖ్యలో కొన్ని చిన్న జీవాణువులను off-springs) పునరుతృ త్రి చెయవచ్చు 
కాబట్టి ఈ సంఖ్యను 4 తో సూచిస్తూ, 2 యొక్క సంభావ్యతా విభాజనము 


P (ఒక బివి k చిన్న జీవాణువులను పునరుత్పత్తి చెయడం' 

యి 
=P(Z2=k)=a;,k=0,13,2,...3;8 20 ౫ a=1 

0 

అని అనుకొందాము, దీని సంభావ్యతాజనక |పమేయము probability generating 

యి 
function )* pg (2) = FY హ్‌ 21 అనుకొందాము. 
k = 0 | 


ఆదిలో అసలు జీవాణువుల సంఖ్య ౫, అంటే 0-అత౮ (generation) లోని 
జీవుల సంఖ్య లగ్న అనుకొందాము. ఈ త్ను బీవాణువుల కుద్భవించిన మొత్తం చిన్న టీవాణు 


*ధనపూర్ణాంకమువలనే స్వీకరించే యాదృచ్చిక చలరాశి ౫ యొక్క సంభావ్యతా 


Co 


విభాజనము P (K-k)—=a 0,2 జై! అయి 2 త్తు 1 అయ్యేటట్టు 
0 


య 
సంకీర్ణ చలరాశి 2 యొక్క ఒక్క విలువకైనా ౫ ఇ =F అభినసరణం చెందితే, అట్టి ఘాత 
| 0 
1 పేణిని X యొక, జనక పమేయమంటారు. 
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వుల నంఖ్య X, ఆయితే, 1-వ తరంలోని జీవుల సంఖ్య X, అన్నమాట. ఇదేవిధంగా 1-వ 
తరంలోని జీవుల సంఖ్య ౫ తో సూచిస్తే (౫, 2 = 0, 1, 2, . ++) క్రియను విచ్చిన్న 
బౌంచింగ్‌ [ప్రక్రియ (discrete branching process) అంటారు, ఇప్పుడు ఈ ప|క్రియను 
పరిశీలిద్దాము, 

౧-వ తరంలోని సంఖ్య తెలిసి, (n a 1) =వ తరాన్ని పరిశీలించడానికి. 
1 - వ తరానికి ముందు తరాలకు సంబంధించిన సమాచారంతో పమేయంలేదు. అంటే X 
విలువ ఆధారంగా, Xn ను తెలుసుకోడానికి XxX, KX, ees X విలువలతో పనిలేదు 
కాబట్టి (౫, 1 = 0, 1, 2, ...} మార్కోటప్‌ శృంఖలమవుతుంది. దీని సంక్రమ నంభా 
వ్యతా _వమెయాలను తెలుసుకొందాము, 

౧వ తరంలోని జీవాణువుల సంఖ్య త్న == 1 అనుకొందాము. ఈ 1 బీవాణువు 
లలో 1 ( =f, బీ ee i) వ జీవికి ఉద్భవించిన చిన్న బీవాణువులు ఒక యాదృచ్చిక 
సంఖ్యలో ఉండ వచ్చు కాబట్టి దినిని Z, త్రో నూచి సే, LZ, 2, mena Z, లు స్వతంత 
యాదృచ్చిక చలరాశులై వై 2 విభాజనాన్ని అనుసరిస్తాయని [గహీంచవచ్చు. (1 + 1)_వ 


i 
తరంలోని జీవులసంఖ్య యు కో న 2. |పతిj= 0 


r= |] 
తేట ఇ, X=ij=P( 2 Z =]) 


శః సం|కమ సంభావ్యతా (పమేయము సంకమ సమయము ౬ పె ఆధారపడలేదు. కాబటి 
{X,n=0, 1,2, .... సజాతీయ మార్కోోవ్‌ శృంఖలమవుతుంది. దీనిని P;, త్రో 


సూచి సే, 


దీనినిబట్టి ౫) ౫ = 1 యొక్క. విభాజనము ౫ 2, యొక్క. విభాజనంతో ఏకీభవిస్తుం 
1 


దని గమనించవలె. [| ని కనుక్కోడానికి జనక [పమేయ ధర్మాన్ని వాడితే, 


a X హ్‌ i యొక్క జనక [ప్రమయము 
1 
జా pa Zz, యొక్క జనక |పమేయము. 
శే 
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కాని ల, 20; జ లు స్వత౧క సమవిభాజన యాదృచ్చిక చలరాశులు , 


1 ets షే 
గ, ళ్‌ రాక న్న జనక [ప్రమయము = (8 (2) +! జల న్న హ్‌ ౭న గ 
l 


(పతి 1౫> 0కు 
తా ప 
s P;; = నాడి z¥ సాతి త 2.5.6 
j= 0 0 అ 


P.. = కుడివై పు ఘాతశేణిలోని డో యొక్క గుణాంకమవుతుంది. 


1) = 


X = 1 అయిన సందర్భంలో 1 - వ తరంలోని జీవాణువుల సంఖ్య Xx ను తెలుసుకొనే 
అవనరం, ఆస కి కలగవచ్చు. ఇప్పుడు దీనిని పరిశీలిద్దాము. 


త్య, 1. వ తరంలోని సంఖ్య యొక్క ఉపాంత సంభావ్యతలు 
Mi = mi ee : 
P, P(X =jj=P(Z=j a, j>0 
య యొక్క జనక పమేయము 
p=? (బ్ర = వరకు బీ= 5,8 
ఇదే విధంగా (పతి n౫= 1కు, XX యొక ఉపాంత feuds 
జ — 1 హః = itu (Hh 
p, = P(X jj=P(X, j X 1) క 
దీని జనక [ప్రమయము 
ప జ 
అనుకొంటే, స్ట | యొక్క జనక [ప్రమయము 


\ కా (n+1) లా 
తా (2, మ్‌ P, స్ట 


= E n+ 
=)E 2 మల X = P(X =) 
] 
= రై {P (2) 7 P(X =) ((2.5.6) నుంచి, 


నూరో గ్రావ్‌ థృంఖలొాలు 


259 {P(2) =F, P (2) 
J 
ఇదే విధంగా గణితానుగమనం [వకారం 
Pr (2) =? LA (2) 
అని కూడా చూపవచ్చు. 
Bi (=P, P(ay =P, (ay ౨ 259 


(2.3.2) దృష్టా ౬ - మెట్టు సంకమ సంభావ్యతా [ప్రమయము న్‌ = bp గ 1 
విపులీకరణంలోని 2 గుణాంకము, 


2.6 స్థితుల వర్తికరణము 


దృగ్వ్యిషయాలను మార్కోవ్‌ శృంఖలాల ద్యారా రూపకల్సనచెసి, వాటి ఆధారంగా 
దృగ్విషయాల పురోగమనాన్ని విశెషించడం జరుగుతుంది. సాధారణంగా ఈ విశ్లేషణకై 
మార్కోవ్‌ శృంఖలాలు కాలగమనంలో ఎ ఏ స్థితులను [(పవెశిసున్నాయో పరిశీలిస్తే చాలు. 
మార్కొవ్‌ శృంఖలాలు స్టితి ఆవరణంలోని వివిధ స్థితులలో దేనినైనా (ప్రవేశించవచ్చు. 
కాబట్టి ఈ విషయాన్ని దృష్టిలో వెట్టుకొని ఇప్పుడు స్థితి ఆవరణంలోని స్థితుల వర్గీకరణను 
చేద్దాము. 


(1) (దవోళింథ. తగిన నీతి (accessible state): మార్కో_ప్‌ శృంఖలం 
యొక్క స్థితి ఆవరణంలో 1, ] లు ఏవై నా రెండు స్థితులు అనుకొందాము. అహాన్య సంభావ్య 
తతో మారో_వ్‌ శృంఖలం పరిమితకాలంలో 1 - స్థితినుంచి j - స్థితిని చేరగలిగితే అట్లాంటి 
J ని 1] నుంచి  పవెశింపదగు స్థితి (accessible state) eT అంటే, [పతి పరిమిత 
ధనపూర్ణాంక ము ౬కు సు |g స ౦ ఆయితే 1 నుంచి J (పవెశింప తగిన స్‌తి 
అవుతుంది. దీనిని సాంకేతికంగా 1 = j తో చూపుదాము. 


(ii) నమాచార్‌ సతులు (communicating states) : అకూన్య సంభావ్యతలతో 
మార్కోవ్‌ శృంఖలం సై I స్థితి నుంచి మరొక గతి j నీ, తిరిగి J స్‌తి నుంచి 1 స్థితిని 
వవెశింపగలగితే, 5 లోని అట్లాంటి 1, Jj స్థితులను ప స్థితులు ‘(comminicatng 
states) అంటాము. 1, J shee స్థితులయితే, “7 nm) > 0, Pp. m0 అయ్యేటట్టు 
15, m అనే రెండు పరిమిత ధన పూర్ణాంకాలు ఉంటాయి. "దీనిని సాం శేతికంగా 1లా) తో 
చూపుదాము. అంటే, 


ఏదైనా 1 9 (<0) లకు p, n= 0 లెదా క, (మ = 0 అయితే, |. స్థితులు అసమా 


చారస్థితులు (non-communicating states) యో 
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సమాచార లక్షణానికి సౌష్టవతా ధర్మము, సంక్రమణ ధర్మము ఉన్నాయని 
చూడ వచ్చు. 


నొవ్షవతా భర్వయు (Symmetric property les) SJ], కరీ 
సమాచార నిర్వచనాన్ని బట్టి అనుసరిస్తుంది. 


నం/కమణ ధర్భయు (transition property) '|పతి1,)J,k ఈ ఏకు 


సంబందించి, 
oe], Je ksi Ek 


ఎందుచేతనంచే, అపు! ఏ... తాము. 5 ఆయితే, ర పౌ, ర పౌ అయ్యేటట్లు 
రెండు పరిమిత పూర్ణాంకాలు 1, మ ౨ 0 ఉంటాయి. కాని (2.8.8) పకారం 


(n+ — ( 
1౬5 
PD" పా౦ అయ్యేటట్టు 5 (0) ను కనుక్కోవచ్చు. అంటే, 11౬. ఇదేవిధంగా 
pr," >0 అయ్యేటట్టు ఓక పరిమిత ధనపూర్ణాంకం rను కనుకో)_వచ్చు., అంటే, ఓ ॥ 


(iii) నమాచార్‌ తరగొతులు (Communicating classes) సమాచార 
లక్షణాన్ని బట్టి స్థితి ఆవరణంలోని వివిధస్థితులను కొన్ని సమాన తరగతులుగా వర్గిక 
రిసాము. మార్కవ్‌ శృంఖలము ) స్థితినుండి వెరే స్థితులను పవేశించడం, తిరిగి ఆ స్థితుల 
నుంచి 1 స్థితిని (పవేశించడం జరిగితే అటువంటి సమాచార స్థితుల సమూహాన్ని మార్కో_వ్‌ 
శృంఖలం యొక్క సమాచార తరగతి (communicating class) ఆంటాము. 1 తో 
సమాచారమందుకొనే స్థితుల సమూహాన్ని 1 స్థితి సమాచార తరగతి అవుతుంది. దినిని 
0 (1) తో సూచిస్తే, [పతి 


౬వ, i—j3jE8c(i) లేదా jec(ij3i— |]. 


ఒక్కొక్కప్పుడు c(i) కూన్యతరగతి కావచ్చు. అంటే, 1 సితితో సమాచార 
(థి 
మందుకొనే స్థితులు 5 లో లేనప్పుడు, C (i) — 0. అప్పుడు మార్కోవ్‌ శృంఖలం 1 స్థితీ 
నుంచి బయలుదేరి ఏ దశలోనైనా తిరిగి ని ప్రవేశించదన్నమాట. అట్టి ॥ స్థితిని “తిరిగి 
చేరని” (non-return) స్థితి అంటాము. 6 (1) ఆహన్య తరగతి అయితే, 1 స్థితి నుంచి బయలు 
దేరి తిరిగి 1 స్థితిని (పవేశిస్తుందన్నమాట. అంటే, సంక్రమణ ధర్మం పకారం 1 ా J; 
hues ఆయ్యటట్టు ఏదో ఒక స్ధితి $ ఉంటూ, 1 ఈా 1 అవుతుంది. దినిని బట్టి 0 (i) gE 0 
అయితే, 1 స్థితి 1 తోనే సమాచార మందుకొంటుంది. ఆటువంటి ! స్థితిని “తిరిగి చేరు! 
(return) సితి అని [గహించవచ్చు. 
ers 


A2 | మారో్కవ్‌ శృంఖలాలు 


5 లో వర్వరు రెండు సమాచార తరగతులు 0 (i), 0 (J) లు ఉంటి, అవి 
పరస్పర వియుక్త (Mutually exclusive) తరగతులని నిరూవించవచ్చు. ఎట్టాగంటే, 
విటికి ఓ అనే ఉమ్మడి స్థితి ఉండి ఉంటి: | —*“k,k—j3i<-—-' j. అంటి, 
క్వ ద్వారా 6 (1 లోని పతీ స్థితి 6 (j) లోని పతీ స్థితితో సమాచారమందుకొంటూ, 
౮ (1), 0 (J) లు కలసి ఒకె నమాచార తరగతి అయే అవకాశం ఏర్పడుతుంది, కాబట్టి 
6(1, 0/00) లు పరస్పర వియుక్త తరగతులు అవుతాయి. అందువల మార్కోోవ్‌ 
శృంఖలం అశకూన్య సంభావ్యతతో ఒక సమాచార తరగతి నుంచి మరో సమాచార తరగతిని 
[వవెశించ వచ్చుగాన్సి తిరిగి మొదటి తరగతిని [పవశించడం అసంభవము. అంటే, 


1౯౦(పఏ, ఎ ఓం బైకు వా 0, p,™ = ౦, 


లెదా P;, MM) వ క. క్‌ a) అయ్యేటట్లు n»mn,m టొా౦ ఉంటాయి. ఈ విధంగా 
స్థితి జ్‌ ము ఏ ని పరిమిత లేదా గణన సాధ్యమైన వియ క సమాచార తరగతులుగా 
విడదీయవచ్చు. 


ఉదాహరణకు, స్థితి ఆవరణము 5 = 11, 2, 3, 45) గా గల ws 
శృంఖలం యొక క గుం కమ నంభావ్యతా మా్యతిక Pని పరిశీలిద్దాము. 


Hej 

Hej 
OO 
© 
లా 


ఇక్కడ 1 లాం 2, 3 — 4, 4 ఈాార్ర. సంక్రమణ ధర్మం |వకారం 3 హా 5, 
కాబట్టి 5 ని {1 2}, {3, 4, ర్‌} అనే రెండు వియుక్త సమాచార తరగతులుగా * 
విడదీయవచ్చు. 


(iv) నంవృత తోరోగోతి (010566 01255) : ఏదైనా ఒక సమాచార తరగతిలోన్స 

1 స్థితి నుండి ఆ తరగతికి చెందని [పతి | స్థితి పవేశింపదగని (not aceessible) § సిత 
అయితే, అట్టి సమాచార తరగతిని సంవృత తరగతి (closed class) అంటాము. సాంకేతి 
కంగా, ఒక ees తరగతి € కి నంబందించి, ఏప8I1e€C,j#C అయి, p..7 = 0, 
= (1, 3, ౨... అయితే Cని సంవృత తరగతి అంటాము, ఇక్కడ ప హం 
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ఏమ్రం'టి పై ౦, 1౯ క 20... కావచ్చు. అంటె C కి చెందని స్థితులకు C లోని 
స్థితులు పవేశింపదగు స్థితులు కావచ్చు. మార్కప్‌ క్చంఖలం ఒక పర్యాయం సంవృత 
తరగతిలోకి [పవెశించిందం టె, తదనంతరం అక్కడే ఉండిపోతుంది. ఒకే మూలకం గల 
సంవృత తరగతిని విలీన (absorbing) తరగతి ఆంటాము. 


రెండు విలీన హద్దులుగల యాదృచ్చిక నడకకు సంబంధించి 2.5.2 లోని సం్యకమ 
సంభావ్యతా మా;తికను పరిశీలి స్తే, 


న్‌ = (0, 1, 2069 2ా |, a}. 5 ను (0), [1 ల. a— 1}, {a} అనే 
మూడు పరస్పర వియుక్త నమాచార తరగతులుగా విడదీయవచ్చు. రెండో తరగతి నుంచి 
మొదటి తరగతిలోకి, మూడో తరగతిలోకి |పవేశించడానికి వీలవుతుండి. కాని 1, 3 వ 
తరగతుల నుండి తిరిగి రెండో తరగతిని పవేశించడం అసంభవము. కాబట్టి (0 012 | 


లు సంవృత తరగతులు. ఇవి ఒక మూలకంగల తరగతులు కావడంచేత విలీన తరగతులు 
కూడా అవుతాయి. 


(౪) విశదీయలోమి. (irreducible) మారో_బ్‌ భృంథిలము : ఏ మార్కొవ్‌ 
శృంఖలానికి సంబంధించిన స్ధితి ఆవరణంలోని స్థితులన్ని కలసి ఒకే సంవృత తరగతిగా 
ఎర్పడతాయో, అట్లాంటి దానిని విడదీయలేమి మార్కోవ్‌ శృంఖలమంటారు. విడదీయలేమి 
మార్కోవ్‌ శృంఖలంలో అన్ని స్థితులు ఒకదాని నొకటి పవెశింపదగు స్థితులు అని స్పష్ట 
మవుతుంది. అంటి, (పతి) ౭5కు, వ పౌ0 అయ్యేటట్టు కనిసక ఒక) పరిమిత 
ధన పూర్ణాంక ము 1 అయినా ఉంటుందన్న మాట. 


ప ఆవరణము ఏ = {1, 25:2, 4} గాగల మార్కో_వ్‌ శృంఖలం యొక్క 
సంకమ సంభావ్యతా మాతిక 


1: శు శు శ 
శ్రే శ్రి 0 0 
Pp = 
1 fz జపే పై 
బే 1 ఫై పే 
i 


ను పరిశీలిస్తే, పతి 1) = 1,2,3, 4 లకు 9.9 ౫ 0 అయ్యేటట్టు ఒక పరిమిత 
n>0 కనుక్కావచ్చు. కాబట్టి 5 ఒకే సమాచార తరగతి, దాని మార్కోవ్‌ శృంఖలం 
విడదీయలేమి అవుతుంది. ఇదే విధంగా “క్యూ నమూనాకు సంబంధించి (2.5.5) లో ఇచ్చిన 
మాతిక [పకారం (పతి 1కి a ౫ 0 అయితే అది విడదీయలేమి మార్క్‌ శృంఖలమని 
చూపవచ్చు, 


4! మార్కో వ్‌ శృంఖలాలు 


(vi) అవ రిల సతులు (periodic states) : సతి ఆవరణంలోని కొన్ని స్థితు 
లను వదలి మార్కోవ్‌ శృంఖలం తిరిగి నియమిత కాలాలవద్ద మాత్రమే ఆ స్థితులను (పవె 
కించడం జరుగుతుంది. ఆశూన్య సంభావ్యతలతో పతి 0కి, ఈ, 24, 3d, ... సమ 
యాల వద్ద మా|తమే ఏ గతి 1ని పవెశించడం జరుగుతుందో, ఆ ॥ స్థితిని ఆవ ర్రిత స్ధితి 
(periodic state) అనీ, d ని ॥ స్థితియొక్క ఆవర్రన కాలము (per0d) అనీ అంటాము. 
గణికీయంగా, ॥ స్థితికి సంబంధించి, ర >0 అయ్యె అన్ని ధనపూర్ణాంకాలు n యొక ,._ 
గరిష్ట సామాన్య భాజకము (greatest common divisor) ను (d, తో సూచిస్తూ స్థితి 
ఆవ రన కాలమంటాము. 


రే చే ౧ భాగంపదగినది అయితే, pa > 0 
d, చే ౧ భాగింపదగనిది అయితే, వ్‌ = 0. 
d, = 1 అయితే ॥ స్థితిని అనావ ర్రిత (aperiodic) స్థితి అంటాము. 


ఆవ రిత, ఆనావ ర్రిత స్థితులు కింది ముఖ్యధర్మాన్ని (ప్రదర్శిస్తాయి. పెనిర్వచ 
నాన్ని అనుసరించి ఇది సిజమని తెలుసుంది. 


నీద్దాంతము 2.6.1 : 1 స్థితి ఆవ ర నకాలము ర (> 1) అయితే, అన్ని 
పూర్ణాంకాలు 2 = N కు, pp," ౫౦ అయ్యేటట్టు ఒక పూర్ణాంకము [౫ 0 ఉంటుంది. 


ఉవనిద్దాంతము 2.6.2 : లల) పౌ 0 ఆయితే, చాన కు 
p..mtnd) > 0 అయ్యేటట్టు ఎ 0 ఉంటుంది. ఎందుచేతనంటే, 23,06 దృష్యా, 
J! 0 బ్‌ 


(యచయిత _ (మ) (nd;) (mM) py (nd) 
Bs i= 2 Py Py =p, ™ pp, >0. 
keS 


నీద్ధాంతిము 2.6,3 : J అయితే, 1, j స్థితుల ఆవ_ర్థనకాలాలు రే = d. 

నిటావణ : ఏదైనా పూర్ణాంకము 8 0౦ యొక్క. భాజకము d, అనుకొందా ము. 
ఆవ ర్తనకాల నిర్వచనము, వై ముఖ్య ధర్మం [పకారము, 

సప) > 0. p,, N+1s) కట 
(శా 1) 5 23, (N +2)s— Ns, ... అను d, చే భాగించవచ్చు. | ా | 
కొబట్టి ర. > 0, pa, >0 అయ్యెటట్లు టా 0 లు ఉంటాయి. ఇప్పుడు, 
రాలా > క్‌ ష్ట్ర జ. బారి 

ఇదే విధంగా, p.. n#N+ 18+m) >0 


jj 
“యొ వర d. 
J క్క ఆవర్తనకాలము £ చే 
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స్థ ౧ 
n+t(N+ Sm ఆ n+Ns+m =s 


ని భాగించ వచ్చు. అంటే d, చె5ని భాగిస్తే, ర చే కూడా 5 ని భాగించవచ్చు అని నిరూ 
వించినాము. దీనినిబట్టి రే చె రని భాగించవచ్చని స్పష్టమవుతుంది. ఇదే విధంగా 
pn తో పారంభమై ర్మే చే క ని భాగించవచ్చని నిరూపిస్తాము. ఇది ౮, = రే 
అయినప్పుడే సంభవం కాగలదు, 


ఒకే సమాచార తరగతిలోని అన్ని స్థితులకు ఒకె ఆవర్రనకాలం ఉంటుందని పె 
సిద్ధాంతం దృష్ట్యా స్పష్టమవుతుంది. అంచి ఆవర్తన లక్షణం తరగతి ధర్మము (class 
property) అవుతుంది. విడదీయలేమి మార్కో_వ్‌ శృంఖలాలకు సంబంధించిన స్థితులన్నీ 
అనావ ర్రనాలు అయిళలే, [హైవే అయి, వేటు తోని (పతి మూలకము జ్‌ >0 అయ్యే 
టట్లు ఒక ధనపూర్ణాంకం N ఉంటుందని పై సిద్ధాంతాల ఆధారంగా కూడా (గ్రహించవచ్చు. 


ఉదాహరణగా, 4 స్థితులుగల సజాతీయ మార్చో_వ్‌ శ్ఫంఖలం యొక్క P న 
పరిశీలిద్దాము. 


0 0 3 3 
0 0 3 4 
Pre 
3 3 0 0 
1 3 0 0 
స్టే 3 0 0 
శే 3 0 0 
దీని నుంచి, P(®) = P2 = 
0 0 3 జే 
0 034 


సార్య|తిక ౦గా, 02 1, 93, +... లకు 


pant) == వ, PAV = p2. 





 * సమాచార తరగతిలో ఒక స్థితి ఏదైనా లక్షణాన్ని పొంది ఉంటే, ఆ తరగతి 
లోని అన్ని స్థితులు కూడా ఆదే లక్షణాన్ని పొంది ఉండడం తరగతి ధర్మమవుతుంది, 
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వై మార్కోవ్‌ శృంఖలం ఏదైనా ఒకస్థితి 1 నుంచి బయలుదేరి, 1=2, 436, ... వ మెట్ట 
వద్ద మా|తమే స్థితిని తిరిగి |వవేశిస్తుంది. కాబట్టి వై Pకి సంబంధించిన మార్కో_వ్‌ 
శృంఖలం ఆవర్తిత “మార్మోవ్‌ శృంఖలమనీ, దాని అవ ర్రన కాలము 2 అని చెప్పవచ్చు. 


షా 7 పునరావృత స్థ సితులు (16020011 states) 


మార్కో.వ్‌ శృంఖలం పరిమిత కాలము (finite steps) లో ఒక స్థితినుంచి ములో 
స్థితిని పవెశించడాన్ని బట్టి స్థితులను వివిధ సమాచార స్థితులుగా వెన వర్గీకరించాము. కాని 
ఏదై నా దృగ్విషయాన్ని మనం అనంతంగా చాలకాలము (n= 0) పరిశీలించగలిగినప్పుడు 
ఈ అనంతకాలము (infinite steps) లో వ్యవస్థ కొన్ని స్ట సీతులను అనంతంగా పలుమార్తు*ేశే 
(infinitely often |), మరికొన్ని సీ సితులను పరిమితంగా పలుమార్లు (finitely often) 
సందర్శించడం గమసిసాము. ఈ విధంగా వ్యవస్థ లేదా దానిని రూపకల్పన చేసె మార్కో_వ్‌ 
శృంఖలం అనంతంగా పలుమార్లు (ప్రవేశించే స్ట సితుల తరగతి, పరిమితంగా పలుమార్లు (పవెే 
శించే స్థితుల తరగతి అని స్థితి ఆవరణాన్ని రెండు [పత్యేక తరగతులుగా విడదీయడానికి 
అనువైన ప్రమాణాన్ని (02441౦01) రూపొందిద్దాము. ఈ (ప్రమాణము ఏర్పాటుకు అవనర 
మైన సంకేతాలను ముందుగా వివరిద్దాము, 

5 లో ఎదైన ఒక స్థితికి పతి పూర్ణాంకము 1 > 0కుసంబంధించి కింది 
సంభావ్యత లను నిర్వచిస్తే, 


[,;(౨) = ఇ (వ్యవస్థ ఆదిలో ॥ స్టితినుంచి బయలుదేరి, ఇవ మెటులో 1 సితిని 
11 @ థి టి @ 
తిరిగి (పవేశించడం) 


|| 


P (X = 1 $= అనితెలును. 


n 


[యొ =P (వ్యవస్థ ఆదిలో 1 సితినుంచి జయలుదేరి. ౧వ మెటులో 1 సితిని 
11 0 ఫి యట థి 
తిరిగి | పధ మంగా సందర్శించడం 


=P(X =i X £i(l=1, 2, మా 1 ర్ట మ! 


IP a ee మెట్టులొ 1 స్థితినిచేరు పథమ వవేళ సంభావ్యత (first entrance 
అం 
probability} అంటాము. ఖే = DIN అయితే, f..*, ఆదిలో ॥ స్థితినుంచి బయలు 
n= | 
దేరి తిరిగి ॥ స్థితిని ప్రవేశించే సంభావ్యతను తెలుపుతుందన్నమాట. ఇదే విధంగా, (౮) 
13 క్‌ 
గ్‌; f,.* లను నిర్వచి స్తాము. (పత్యెకించి. fs = (0, i =p, అవుతాయి. పథమ 
*శపరికీలించిన అనంత కాలము (మ క 00) లో అనంత మెన సార్దు ఓక స్థితిని 
(పవేశి సే, దానిని “అనంతంగా పలుమార్దు' పవేశించిందనీ; అదె అనంతకాలంలో కొన్నిసార్లు 
fF చ య) మా(తమే (పవేశి స్టే 3 పరిమితంగా సలుమార్జు' [పవెశించిందనీ అంటాము. 
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పవెేళ సంభావ్యతలు వీ (౧) లను సం|కమ సంభావ్యత లు ౨, లద్వారా కింది సమీకరణం 
సహాయంతో గణించవచ్చు. 


(పతి పూర్ణాంక ము n~>0, (పతి 1 1 865 లకు. 


n 
p.m = ¥ f. (r) ర (n>r) 
1) 1] 

=| 


జన్‌! 


ఎందుచేతనం టే, X=i,;,X =j అవుతూ 1 (మ 1) వ మెట్టులో [పథమంగా J స్థితిని 
(ప్రవేశించే ఘటనను డీ తో సూచిస్తే, A, (r=1,2, మి) లు వరస్పర వియు క 
ఘటనలని స్పష్టమవుతుంది. కాని X =i అయి, అంటే ఆదిలో 1 -- స్థితి నుంచి 7 వ 
మెట్టులో (ప్రథమంగా 3 - స్థితిని పవేశించే సంభావ్యత ff, ; మిగిలిన n—r మెట్టలో 
తిరిగి 3 స్థితిని (పవెశించే సంభావ్యత య్‌ Mes) me కాబట్టి గుణన సంభావ్యతా 
సిద్ధాంతం వకారము 


A)”. py ™, reb2 eon 


క్‌ = P (X = J XxX = i) 


>» P (A): 


r=1 


= 3 త Faas i,j eS. 


[= 1 
(ప్రత్యేకించి 1= ) అయితే, 
an 
రో = వె స జ్‌ షె 2.132 
= 1 
f..0 = 0 కాబటి (2.35) నుంచి, 
i టి. 
ఈలా 
MY Wh (Tn (nr) 1 
f.. n P;, 22 f.. క రి 


(236) 'నహాయంతో == (ఫ్య) తెలిస్తే షేము, కిల ... లను పారంపర్యయంగా. 
గణించవచ్చు. క | 
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అనంతంగా ఏదేని వ్యవస్థను పరిశీలించినప్పుడు అది కొన్ని స్థితులను కగుగుం 
కొన్నిసార్లు మాత్రమే (పవేశించడం లేదా ఆ[కమించడం జరుగుతుంది. ఇవుడు ఆ 
ఆక్రమణ సంభావ్యతలు 0006926102 probabilities) ను పరిశీలిద్దాము. 

క; = P (వ్యవస్థ ॥ స్థితి నుంచి ఆదిలో బయలుదేరి, తిరిగి కనీనం ॥ సార్లు 


అయినా J స్థితిని ఆక్రమించడం) 
అయితే, 


లయ 
2 క్‌ క -ఏ) అని వాయవచ్చు. 


7౩. 


[| 


(2) 
ర్‌; 


(nN) = f శః (డా) మ 
ర్స్‌ స ర్మ శ 


శ్‌ ( న 
| పత్యేకంగా , క్‌ D= fas 


J ఆ 
(2.7.4) [పకారము, 
(౨) 3 MD=f*, ftp వం == 0 * 7 *9ం02 M— 8 
55 “1 ల్స్‌! rh hh టు క్‌ ( 
అల ఈ =f .*® fe అవుతుంది" 
yy ౨౨ 
(nN) — * 
[పత్యేకంగా, ర యాను ట్‌ 5 J ం 


*= Lt (n)— f * శ wn} 
క్‌ క్‌ Si, Lt స! 
వ 0 తే. య | 


n 
క (hn) = zi (1) 
లేదా ర్‌; Lt gy" Lt (fy 
nh—->3య60 n— 060 గా 


తో సూచిస్తే, క", వ్యవన్గ ఆదిలో [1-స్థితినుంచి బయలుదేరి, తిరిగి ॥ స్థితిని అనంతంగా 
పలుమార్లు సందర్శించే సంభావ్యతను తెలుపుతుంది. (2.7.5 నుండి, 


ire loge 


il 
అంటే, | స్ధితి నుంచి ఆదిలో బయలుదెరి తుదకు | స్ధితిని [పవెశించడం తథ్యమయితే, అతి 
వంటి 1 స్థితిని ఆ వ్యవస్థ అనంతంగా పలుమార్హు (_పవేశించడం కూడా తథ్యమన్నమాతు _ 
2.7౨ నుంచి 


f.* <13g.*=0 
11 11 


అంచె, 1 స్థితి నుంచి ఆదిలో బయలుదెరి తుదకు ॥ స్థితిని [పవెశించడం అనిళశ్వయమయి 
అటువంటి 1 స్థితిని వ్యవస్థ పరిమితంగా పలుమార్లు మా్యతమే (పవెశిస్తుందన్న మాట, 
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నిర్వచనం. 2.7.1; f.*=1 ఆయితే, 1 స్థితిని వునరావృత స్థితి 
‘recurrent state’ అనీ, క నే. అయితే | స్థితిని నంక్రమణ స్థితి (transient లేదా 
non-recurrent' అనీ. అంటాము, న 
| ౨ త్‌ ~~ శ ~~ 
. 4 పునరావృతస్థితి అయితే, ల 138 == 1 


0. 


| సంక్రమణ స్థితి అయితే, గో 6 1 యి క్రీ 


దీనినిబట్టి పునరావృత 7 సితులను అనంతంగా పలుమార్లు (పవేశించ డం, సంక్రమణ స్థితులను 
పరిమితంగా పలుమార్దు 'మాతమే సందర్శించడం జరుగుతుందని స్పష్టమవుతుంది. 


నీద్ధాంత ము వ.759*ల ) = 1 ఆయి, J] పునరావృత స్థితి అయితే, క్‌ు] 


నిరూదణ 4 (పతి 1 స్థితి 1౭5, పూర్ణాంక ము [౫ ౦0కు సంబందించి, 


“= 1, Pr క్‌" అని చూడవచ్చు. 
kes 
T es శ నాన (౧0). oe ల్‌ 
పాక 2 కట్‌ 1-8 
kEeS 
) పునరావృత స్థితి అయితే, క్‌" = 1 కాబట్టి పతి కల్‌ 5 కు 
కావా! (11) ల ui నా ea 
0= Py" (1 క; , 0 n 1,2, 3, 
k= గా తీసుకొంచి, 
— ( -_ స _ ne 
0 == (1 డ్‌; 9 2 1,2, 0, 


(న వ క 0 అయ్యేటట్లు 1౫0 కనుకో,-వచ్చు. 


= వే శ 
1— 8, 0 లేదా క్ర" = 1 

2.1.5) [ప్రకారము 
క = క్‌ ఫీ జజ | . (ం నా = 
f.. శ పలు బట్టి స్థితి ఆవ కానా స్థితులను పునరావృత స్థితులుగాను 
సం|క మణ స్థితులుగాను వర్షీకరించ Horta ఈ [పథమ పవేశ నంభావ్యతలను సం|కమ 
సంభావ్యతల దారా గణించవలసి ఉంది కాబట్టి పె పై వర్గీకరణ (వమాణాన్ని [పథమ |పవేళ 
3 రూపొందించ వచు. 
సంభావ్యతలలోనేగాక నంక్రమ సంభావ్యతలలో a కింది విధంగా = 


4 


న త్‌ 


నీద్గాంతోయు £.7.8 ఓక స్థితి ! వునరావృత స్థితి లెదా సం[క్రమణ స్థితి అవడానికి 


| b “oo ; ప సత్యా 
ఆవశ్యక, పర్యాప్త నియమాలు వగసగా ౫ సెగ) = ౦ లేదాలలు, 


n= 1 | 
నిదావజి* 2.7.1 పకారం  " 
N NN n 
(n}) = . f. (7) (1-౪) 
జ 2 > f ర్య 
h=l n=lr-—}| 
| N టా! - 
= f (స (2) 
2 D> కి 
కూ! n=0 
N N న్‌ ' 
f..0x) భో 
> 2 1] 3 2 EF న్‌ ష్‌ 
i=l  n=Q. న ల 
ఇదే విధంగా; (వతి ౫/౬ 7 క్ర కూడా, 
N గాః N-N 
2 p> గ పక 5 ఫ్య” అని చూడవచ్చు. 
n= 1 శై 1 n= 0 హత 4 జ 
గ వంటా ON, N N 
+ గ్రా (2) DM << x (5) (n) 
శై వా |] వివా 0 n= | r=] “n=0 ఆ 
ఈ అనమీకరణంలో వరనగా అవధులు 0, గయ ను తీసుకొంటే, 
N 
(n) 
Ee 2 ల్యే. 
క్ష pee Lt 27 . 
షై ౌ గ 2 78 
వ్‌ Noe qr, FR Ne 
పై p.m . 
ప. లేలే 
 ( 
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న! 
SY Pas” 
1 — 
f*= It Se 
11 N స N 
ఆస్తే. 
1+ 5S వ్‌; 
N ar 
లేదా 1—f.*= lt le 5. Pa. 4247.7 
N—>0, n=l [. | 
C0 
. - (MM = 1 ఆలా జా. 
లేదా. ౫ క జ. 
[= 0 


దీనితో సిద్ధాంత నిరూపణ పూర్తి అవుతుంది. 


ణీ సిద్దాంతము 2.7 4s j సం|క మణ స్థితి అయితే, 


0 
(n) =~ 1 లు "ఖీ సా 
క. 
n= 0 

య 

m= f* 1—f.*-l తు 
sy P;; ff, 1 f°) 60 అవుతుంది, 

n= 


ఇది 2.7.6, '2.7.7 లనుబట్టి నిజమని రుజువవుతుంది. 


ఉవనీద్ధాంతము 2.7.5 : ij అయి, ) వునరావృతస్థితి అయితే, 


= ఇ 
(Mn) = శ 
ఏన [| య, 
n=1 
నేీటానణ వ 1] కాబట్టి స) * = పా 0 అయ్యేటట్లు కనీన పూర్ణాంకము 
[౧౮౦ ఉంటుంది కాబట్టి, చాప్‌ మెన్‌ కొల్క్మొ(గోవ్‌ సమీకరణం (2-3.9 [పకారము, 
హై . 0 ~~ ల ప 
(m) p (1-మెి) 
n= | n= m వ్‌ డఫ 


క్‌ మార్కోవ్‌ శృంఖలాలు 


క్‌ జ యి 
leas) J పునరావృత స్థితి అయితె ఉపా 5 వ్‌ = ౦0. 
r=0 
స్ట 3 య టి ల బ్‌ 
ఈ సందర్భంలో D2 ఫ్య) = ౧౦ అవుతుంది. 
n=1 

ఉవనీద్ధాంతము 2.7.6; శౌ అయి, f,*=1లేదా “12f;,*=|1 
లేదా 1. అంటే, వునరావృత (సం|క మణ స్థితులు పునరావృత (నం|క్రమణ) గితుల 
తోనే సమాచారమందుకొంటాయి. 

ణిరూావణ ౩ i=] కాబట్టి ఫ్య జడ మై 0, ఖా =B>0 అయ్యె 
టట్లు పూర్ణాంకాలు n,mM.>0 ఉంటాయి పతి5;7->0కు (2.3.8 [పకారము, 


(m+s+n) (Mp (Op M—,Rp (3) 
క ౮ పై bi Py «Bp, 


య | 00 
(మరగ) (5) 
p3౫ 0; పాశ. మ 2, (2.7.8) 
s= 0 s=0 
అ | ర్‌ 
యి య ఇ . 
ఇదే విధంగా, RR, = ఉత ౫ Pp; (2.7.9 
r= 0 r= 0 ” 
2.78 నుంచి, | 
రు య 
2 p.0)=03 2౫ p../’=0. 
1 JJ 
s=0 s= 0 


అంది, 1 పునరావృత స్థితి అయితే, ) కూడా పునరావృత స్థితి అవుతుంది. (2.7.9) నుంచి 


0 
ఓ 
తె + 


య 
2 pO<o3 మ p< o 
r= 0: . జు 0 


జి చె 


అంచ, 1 నం్యకమణస్థితి అయితే, ) కూడా సంక మణస్థీతి ఆవుత్తుంది, 
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పునరావృతము, సం|కమణ లక్షణాలు కూడా ఆవర్తన లక్షణంవలెే - తరగతి 
ధర్మాన్ని తెలుపుతాయి. అంటే, సమాచార తరగతిలో స్థితులన్నీ పునరావృత స్థితులుగాని, 


లేదా సంక్రమణ గి సితులుగాని ఆయి ఉంటాయి. పునరావృత స్థితులున్న కేవల తరగతు 
లను పునరావృత Heed తరగతి (recurrent communicating class) అంటాము. ' 


2.8 పునరావృత లేదా నిరీకకాకాల విభాజనము 
recurrence or waiting time distribution ).: 


పునరావృత స్థి సితులే వున్న విడచీయలెమి మార్కో వ్‌ శృంఖలాలను ఇప్పుడు 
పరిశీలిద్దాము. ఏీనికి సంబంధించిన స్థితి ఆవరణం వ్‌ లో, (పతీ రెండు స్థితులు 1356కు 
క్రై 


f*= లై పత కే 
1) 


i స్థితినుంచి ఆదిలో బయలుదేరి, తిరిగి ) సతిని (పథమంగా ప్రవేశించే పాను 
(waiting time) Tతో నూచిసే , 1 అస్ని ధనవూర్ణాంక విలువలను స్వీకరించే యాదృచ్చిక 
చలరాశి అవుతుంది. దీని సంభావ్యతా విభాజనము 


స, 
PFT= మ) ఆక్ట్‌, ii టం క. =0, ౫ fy = f,.*—1. 


n=l 
అద్య ల్స్‌ 
దీని అంకమధ్యమాన్ని ల్‌ తో సూచిసై, 
00 
Fi; = 9 nun. fo (i J) 
వ 1 
(పత్యేకించి |=) అయినప్పుడు, . 
అతి 
p>m= 2 మల 


Es హహ. స్థితినుంచి స్థితిని Fr ప్రవేశించడానికి నగటు (ప్రధమ (పవేశకాలము 
mean first entrance) అనీ, p; ని. 1 స్థితి సగటు పునరావృత లేదా నిరిక్షణా కాలము 


‘mean recurrence or waiting time) "అనీ అంటారు. 


1 పునరావృత స్థితి అయితే, మార్కో-వ్‌ శృంఖలం తుదకు 1 స్థితిని పవేశించడం 
తధ్యమని తెలుసు, కాని 1 స్థితిని తుదకు _పవెశించడానికి మార్కో-వ్‌ శృంఖలానికి సగటున 
పరిమిత కాలమైనా లేదా అనంతకాలమైనా పట్టవచ్చు కాబట్టి ఈ సగటు నిరీక్షణాకాలము [, ని 


క! 
బట్టి పునరావృత స్థితులను కింది విధంగా వర్గీకరిస్తాము. 


బిర్హాచన ము 2.8.1 ట్‌ ఉద ౧౦ అయితే ॥ స్థితిని నిస్సృతశయ (positi ye క 
non-null) పునరావృత స్థితి అనీ, 1, = అ అయితే,  నితిని సంశయ (౧111) పునరావృ 
థి 1 @ 
స్టీతి అనీ అంటారు. 


మార్కోవ్‌ శృంఖలానికి నిన్నంశయ వునరావృత స్థితులను సందర్శించ ఆ నిక్‌ 
సగటున పరిమిత కాలమే పట్టవచ్చుననీ, సంశయ పునరావృత స్థితులను సందర్శిం చ డానికి 
సగటున అనంతకాలం పట్టవచ్చునని నృష్టమవుతుంది. ఇక్కడ 1 వివీక స్థితి ఆ యితే, 
p,;=1 కాబట్టి f,, =p, =1, అంటే, f,,*=1, ట్య =|. దీనిని బట్టి, వితీన స్థితి 
నిస్సంశయ పునరావృత స్థితి అవుతుందన్నమాట. 


ఎిర్జాచనము శీ.లొ.జి : అనావ్వర్తితు నిస్సంశయ పునరావృత స్థితిని ఎడ్డాకిక్‌ 
(Ergodic) స్థితి ఆంటారు. 


ఇంతవరకు వై |పకరణాలలో చెవ్పకొన్న నిర్వచనాలు, స్థితి ఆవరణపు వడక రణ 
విధానాలు పరిమిత స్థితులుగల మార్కోవ్‌ శృంఖలము finite Markov chain) అఆ కేగాక్‌ 3 
గణనసాధ్యమైన స్థితులుగల మార్కోవ్‌ శంఖలము (countably infinite Markov 
chain) లకు కూడా వర్తిస్తాయి. కాని రెండు రకాల మార్కోవ్‌ శృంఖలాల ధలాత్రైఅను 
పరిశీలించేటప్పుడు మనం వాటిని వేరువేరుగా (ప్రస్తావించడం చాల అనుకూలమూ శచముం౦జ 
సంగా కూడా ఉంటుంది. పరిమిత మార్కో_వ్‌ శృంఖలానికి సంబంధించిన ఒక ధరాశ్చ్రైన్నా 
ఇప్పుడు పరిశీలిద్దాము, 


నిద్ధాంతము 2.8.3: పరిమిత మార్కోవ్‌ శృంఖలంలో పరిశీలనా కాలము 
(number of steps, n) అనంత మైన కొద్దీ ఆదిలో ఆది ఏ స్థితిలో ఉన్నా, తుదకు 
సంకమ స్థితిని దేరే సంభావ్యత అవధిలో సున్న అవుతుంది. 


నిటావణ : మార్కోవ్‌ శృంఖలం ఆదిలో పునరావృత స్థితిలో ఉంటే మరల 
పునరావృత స్థితినే పవేశిస్తుంది కాని సంకమణ స్థితిని పవేశించడం అసంభమని తరగతి 
ధర్మాన్ని బట్టి [గహించినాము. ఈ సందర్భంలో (ష్యకియ సంక మణస్థితిని [మ్రవెచాణంచే 
సంభావ్యత భూన్యమవుతుంది, కాబట్టి ఆదిలో అది నం|క మణ స్థితుల సమితి 7కి చెందిన 
ఎదైనా ఒక స్థితి 1 (౬ T) లో ఉందను కొందాము. నంక్రమణస్థితి నిర్వచనం [పకారం9 
[పక్రియ కొంత నిరితకాలంలో Tని విడవడం సంభవం కాబట్టి ఇది జరిగే గరిష్ట నిదైత 
కాలము nn మెట్టు అయితే, అప్పుడు టె) లోని [పతి పం క్రిలోను కనీసం ఒక్క మూలకం 
అయినా ఆభాన్య విలువకు నమానమవుతుంది. ఆంటే, [వతి 1౬౯1, j£T లకు నంబలటెంచి 
Pi: > 0 అవుతుంది. ॥ గరిష్ష సంఖ్య కాబట్టి ps సంభావ్యత ఒక సంఖ్య p (0 ~ 
p< 1 కంటె ఎక్కువగా ఉండేటట్టు. p ని కనుక్కోగలము. అంటే, పకియ 1 మెట్ట లో 
గౌ ని విడవదనే సంథావ్యత 1 --వైకంటె తక్కువ కాబట్టి 


అవధి నం కమ సంఫాొవ్యతలు ss 
2 Pr IHpN¥ieT 
ke T hy me 3 ww పజ 


_ 


ఇంకా చాప్‌ మెన్‌ ా కొల్మొౌ[గోవ్‌ సమీకరణము (2.1.4 [పకారం; 


pm Hie 2 Dik eePre kk, 
k eT k,eT 


వాలే 
దీనినిబటి, 
ల ; 
్ట నై By క (1— Pp)" r=0, wl, wi 
ke 1 . 
> గు క 1-9) O0sm<a 
(nr+m) mre r 
p.m క (1-9 WIJET,. 
1 —> 00 3 ేళారిి 0. 
కాబటి య ఉపటం 0 మ్‌ స ఎ ఈగ. 
రి 


దీనితో సిద్ధాంత నిరూపణ EE) ఆవుతుంది,:. 


1 hk ఖని 
| 
వ 
జ్‌ 


ణ్‌ ఫనీద్ధాంత యు 2; 8.4. పరిమిత మారోవ్‌ గృంఖలాంల్‌ అన్ని. స్థితులు 
సంక మణ స్థ a కాజూలవు,. 


ఎందుచేతనంటే, మ, (న 6) ,నం[కమణ స్థితులు గల. మ్మాక్కోవ్‌. శృంఖలంలో 
m-—1 య. న 

(పతి ఇ కు సంబంధించి లై స్య = 1, 6 ఆఫ యి అయితే ఫి) - (0 కౌబట్టి ఈ; 
120. . 

విరుద్ధ ఫలితం దృష్టా ఉప ద్ధాంతం నిజమని గమనిద్దాము. 


2.9 అవధి సం|క్రవ మ నంభావ్యతలు (Umit transition probabilities) 

ఈ ప్రకరణంలో n-—> 0 అయి నప్పుడు అవధిలో సం|కమ సంభావ్యతలు 
P,; (2) » Ps (n) i, )€ వ్‌ యొక్క అవధి విలువలను పరిశీలిద్దాము. ముందు . క. : 
f, yj} అనే సంభావ్యతల అను[క్రమాలకు సంబంధించిన" జనక 'ప్రమేయాలను చర్చిస్తాము, 
1 ౫ ) అయితే, +2; } కు సంబంధించిన జనక (పమేయము 


హా . 
ఏ z= ¥ ౧..(౫) గ షరా 2 య 1 
i}. + iJ 

n=0 


C0 
— | (n) ,n 
త్‌ 1 2 క్‌ 2 
n= | 


ఇక్కడ I= }JjJcదా1= [పకారం; ల్‌ = 0 లేదొ 1) 


£9) % ప సంబంధించిన జనక _పమేయము 


యం 
wn ras 1 
త్‌ 2) ఫై గ్‌ (2) 2 మల 2 య 
2 1 
ఇక్కడ గ్య్‌(0) = గ((0)==0 గా నిర్వచిస్తాము. 


i=) అయితే, 


ర ~ 
చ జ 2 pie" 
n= i / 
|. 29.1 
య | 
క్‌ తు fa 
రా] i 
1 ఇడ ) ఆయి సప్పుడు, (2.7.1 (వకారం, 
రా 00 n 
PF p mn) లే — ¥ ఏ3 f {r) p ౮-౯) శ 
కే ij “ij 
n= | n=lr=} 
యం రం 


= 2 5 fp mn బా 
Wr, : 


య య 
= సన 7 న. సై ps zm 
f=] m= గ J వ జీ 


“క్మ్‌ 2) (2).P; (2 


ఖీ 


i= ] ఆయితే, 


అవధి 'నం[కమ *సంఖో వ్యతలు న్‌ 


చ మ జ ల ad 
లేదా క (2) = లీ -F,, (2) G4 వొ (2) = 1— {P, (2). 292 


గణిత వి శ్లేషణలోని' ఒక- ఫలితాన్ని ఇక్కడ చేర్కొందాము. 


ఫలితము **2.9.1: a = 0 ఆయి (2. అనే అనుక మాలకు సంవంరీంటీక 
జనక [ప్రమేయము A (2 ఆయితే, 


తే 
రీ 2) = బు a2 2" gfe 2 చ శే, 
n=0 
n 
1 
Lt — 2 a = మ అయ్యేటట్లు ఒక పరిమిత సంఖ్య L ఉండడానికి ఆవశ్యక, 

n In aa) 

పర్యాప్త నియమము (necessary and sufficient condition) E 


Lt 1 me, A(z)=L అయ్యేటట్టు L ఉండవలె. 


z2—ా 1 


నీడ్దాంతము 2.9.2 * పునరావృత స్థితి ) కు, పతి స్థితి! ౬ 5 కు సంబంధించి, 





1 n 
(i) Lt =: 2 DMS 2,9,3 
n నై 3) (ల్‌; 
క. లలా 00 ౧ = J 
= 1 
(11) Lt = J Deft, 2.9.4 
క an n 1) క! (ల్‌; 
11-౨౦0 m= 1 J 
నిడూవణ : నిగ్యచనం పకారం, 
యం అథ, 
py ™ mn క్‌ి, ర్యా! (2) = Sn హా zh-1 
n= 1 మహీ 


** దిని నిరూపణకు ఉత్సాహవంతులై న చదువరులు “Divergent 5లగలట””-09 
ఆ. H. Hardy (1949), theorem 96, page 155 ను సంప్రదించండి. 


'అవధీ నంకోమ నంభావ్యతలు లా 


2.9.2 (పకారం, 


లో Zz) స్తా (1 —F* (2))-! అనిన్నూ, 
2.9.6 [పకారఠి, 


or: 1 
d 4 
Pp," ) ఆవాల PC అనీ (వాయవచ్చు. 
శ్‌ 
ఇక్కడ 6 = Lt వెల! (2) | 


JJ 
2m] 


d 
Pp, > — తన్ని? 


J 
లెదా, మ ఏదైనా ధ నపూర్ణాంక మె, 1 తో భాగింపదగినదయి, 1 ఈ 0 అయితే, 


Par ఫట 2:95 
JJ న్‌ 


శే తో భాగింపదగని (ప్రతి పూర్దాకము 0 ౫ 0కు: 9 ౨ ల అయినప్పుడు, 
(Mm) 
Pen 
(2.7.6), (2.9.6, (2.9.8) ల దృష్ట్యా, ఆవర్తితకాలము రే గా గల ] పునరావృత స్థితికి 


(పతి స్థితి 1 £ 5 కు సంబంధించి, 1 -* ల అయితే, 


0.. (2 కద f..* న జు ప్రప్రళ 6. ౪ 
1] 3 ఏతే ట్‌ 


ఉయ్‌ నిడ్డాంత ము 2.9.4: పతి 1 స్థితికి సంబంధించి, స్థితి J సంక్రమణ స్థితి 


60 మార్చోవ్‌' కంఖలోలు 


గాన్కి పునరావృత సంశయ స్థితిగాని అయి, [లి అయినప్పుడు, ర్‌) > 0. 
అవుతుంది. 


(ా శః క్షే 
J పునరావృత సంశయ స్థితి అయినప్పుడు, ఉలి కాబట్టి భా నిలువ శూన్య 
j 
మని భావిస్తూ, పె సెద్దాంతం సహాయంతో ఈ ఊప సిద్ధాంతం నిరూపణ అవుతుంది. 
నిద్దాంతము 2.9.5: విడదీయలేమి పరిమిత మార్క_వ్‌ శృంఖలానికి సంబందించిన 
స్థితి ఆవణంలో సంశయ స్థితులుగాని, లేదా నం|కమణ స్థితులు గాని ఉండవు. 


శిడూవణ : పరిమిత మార్కోవ్‌ శృంఖలం విడదీయరానిది అయితే, దాని స్ధితి 
ఆవరణము 5 లోని స్థితులన్నీ ఒకదాని నొకటి |పవెశింపదగు స్థితులు కాబట్టి వ్‌ ఓక్‌ 
సంవృత సమాచార తరగతి అవుతుంది. ఈ తరగతిలోని ఒక | స్థితి సంశయ లేదా సం[క 
మణ స్టెతి అయితే తరగతి ధర్మాల |పకారం న్‌ లోని సితులన్నీ సంశియ లేదా సం[కమణ 
స్థితులు అవుతాయి. ఈ తరగతిలో 1, 3 లు దీ ర0డు స్థితులు అయినప్పటికి n— 0 
అయితే శు ఉప సిద్దాంతం దృష్ట్యా, ర్‌ చా 0. కాని [పతి ॥ కు సంబంధించి, 
2D, = 1. అందుచేత 1 -ా ర అయితే లభించే విరుద్ధ ఫలితం దృష్ట్యా సిద్ధాంతం 
లిన్‌ 
నిజమవుతుంది. 


దీనినిబట్టి విడదీయలేమి పరిమిత మార్కోవ్‌ శృంఖలానికి సంబంధించిన స్థితి 
ఆవరణంలో స్టితులన్నీ నిస\ంశయ పునరావృత స్టితులనని (గహెంచవచ్చు. 


నద్ధాంతము 2.9.6: సంశయ లేదా నిస్సంశయ పునరావృత స్థితిగా ఉండడం 
తరగలి ధర్మమవుతుంది. 


ఎఅఎడూవణ : శ) అనె రెండు స్థితులు 1 లా) అయి 1సితి నంశయ లేదా 
నిస్సంళయ పునరావృత స్థితి అయితే, j సతి కూడా నంశయ లేదా నిన్సంశయ పునరావృత 
స్థితి ఆని నిరూవించవలె అవ రిత లక్షణం తరగతి ధర్మం కాబట్టి Is] స్థితుల ఉమ్మడి 
ఆవ రితకాలము 4 తో సూచిద్దాము. 1 = కాబట్టి ర? =a >0, Pp, = B:>0 
అయ్యేటట్టు ధన పూర్ణాంకాలు 1» mM ఉంటాయి, పతి పూర్ణాంకాలు s,r ~>0 కు 
చాపమెన్‌-కొల్మొ[గోవ్‌ నమీకరణం (2.3.8) [పకారం, 


as > వ్‌ రకల) న్‌ా = ౫. pats > 0 (2.9 10) 
ఇదేవిధంగా, 


bon = aB. క్షా > 0 (2 9.11) 


మొద్రట్షో 1 ఫ్‌తి సంశయసితి అనుకొందాము. అప్పుడు 
రు 


పరిమిత, అనంత మార్కప్‌ శృంఖలాలు 61 


Lt. p,,ntsd+m) = 0. 
11 
కొం 
. (2.9.10' (వకారం, 
Lt p..(5d) = 0 
ప J] 


అంటే, 1 సంశయస్థితి అయితే | కూడా సంశయస్థితి అవుతుంది. ఇదేవిధంగా, + స్థితి 
నిస్సంశయ స్థితి అనుకొంచె 2.9.11 (ప్రకారం, 
Lt pd 2 0 జ Lt బో) = 0. 


1 (0 శాప 00౦ 


అంటే 1 నిన్సంశయ స్థితి ఆయితే ) కూడా నిన్సంశయ స్టితేనన్న మాట, 
శ థి 


2.10 పరిమిత, అనంత మారో(వ్‌ శృంఖలాలు: 

ఆచరణలో చాలవరకు పునరావృత సంకమణ స్థితులు గల మార్కోవ్‌ శృంఖలాలు 
మ్మాతమె మనకు ఎదురవుతాయి. వివిధ పునరావృత తరగతుల మధ్య ఎట్టి సంబంధం లేదు 
కాబట్టి _పకియ ఒక్కసారి పునరావృత తరగతిని (పవేశిస్తే, అప్పుడు దానిని గురించి 
ప్రత్యేక చర్చ జరపవచ్చు. ఇదెవిధంగా | ప|కియ సుదీర్గ కాలంలో సం[కమణ తరగతిని 
విడవడం తథ్యంకాబట్టి సంక్రమణ తరగతులకు పునరావృత తరగతులు 'పవేశింపదగు 
తరగతులు” (accessible 0125565) అవుతాయి, అందువల ఆచరణలో కింద పేర్కొన్న 
మార్కో వ్‌ శృంఖలాలను మా|తమే సమగంగా చర్చించడం అనుచిత మవుతుంది అవి 


(i): నరియిలతొ్‌ మూర్కోల్‌ శృంఖలాలు ; 
2) పునరావృత, సం్యకమణ స్ట సితులు గల మార్కోవ్‌ boas 
(b) ఎర్లాడిక్‌ ergodic) స్థితులు గల మార్కోోవ్‌ శృంఖలాలు, 
(il) గణన సాధ్యం మె ఠఈణ ౦లో మారో_బ్‌ క్ఫోంఖులొలు : 
c విడదీయలేమి ఆనావ రిత మార్కోవ్‌ శృంఖలాలు, 
౨ీ.10:1 వరిమిలత మార్కోోలబ్‌ గృంథతులాలు ; ఈ [ప్రకరణంలో పరిమిత. స్థితి 
ఆవరణంగల మార్కో_వ్‌ శృంఖలాలకు సంబంధించి ఆచరణలో ఉపయోగవడే కొన్ని 
ఫలితాలను చర్చిస్తాము. 


పరిమిత మారో»వ్‌ శృంఖలాలకు సంబంధించిన స్థితి ఆవరణంలోని స్థితులన్ని 
సం|కమణ స్థితులు కాజాలవని ఉప సిద్ధాంతము (2. 8. 4) ద్యారా గహించాము. అండచెత 
ప్రస్తుత -చర్చనీయాంశంగా ఒక సం|క మణ తరగతిన్నీ, ఒకటిగాని లేదా అంతకంటె ఎక్కువ 
సమాన పునరాచ్చత తరగతులుగా వర్షకరించగల స్ధితి ఆవరణానికి సంబంధించిన పరిమ్సత్త 
మార్కోోన్‌ శృంఖలాలను పరిశీలిద్దాము, 
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m = స్థితులుగల స్థితి ఉవరణంలో పునరావృత స్థితులు r అనీ, సం|క్ర మణస్థితులు 

Mm-7 అసి అనుకొని, ఈ 7 పునరావృత స్థితుల తరగతిని ౮ తోను, 1-7 నం[కమణ 

స్థితుల తరగతిని € తోను సూచిద్దాము. ఈ మార్కో వ్‌ శృంఖలానికి సంబంధించిన సంక్రమణ 

సంభావ్యతా మృాతిక ని కింది విధిత రూపం (6280181021 form లో వాయవచ్చు.. 
P, ౧ జ న 

Pru 2.10.1 

| R Q మయి. | 


ఇక్కడ P, ఇ C' లోని! స్థితుల మధ్య ఏర్పడే సం్యకమ :సంభావ్యతలే మూలకాలు 
గాగల 1౫7 మ్మాతిక 


Q = '౮లోని ॥-7 స్థితుల మధ్య ఏర్పడే సంక్రమ, సంభావ్యతలే మూల: 
కాలుగాగల (m- r) x I) మా త్రిక. 


R = C లోని స్థితులనుంచి (౧ లోని స్థితులను ప్రవేశించే has 
సంభావ్యతలే మూలకాలుగాగల (మ జ) ౫ 7 మాతిక. 


స్థితి ఆవరణంలో పునరావృత, సంకమణ స్థితులుగల పరిమిత మార్కోవ్‌ శృంఖలాలకు 
సంబంధించి ముఖ్యంగా పరిశీలించ వలసిందేమం ప్రే ఆదిలో సంకమణ స్థితిలో నున్న (ప్మకియ 
తుదకు పునరావృత స్థితిని [పవెశించడానికి పూర్ణము, మరో సంక మణసీలిని సగటున 
ఎన్నిసార్లు దర్శించవచ్చు 1 ఆదిలో ఎదైనా 1 సంక్రమణ స్థ సితి (౨ ౮) నుంచి బయలుదేరి, 
తుదకు పునరావృత స్థితి J iE C') ని [పవెశించే సంక్రమ సంభావ్యతలను గణించడంఎట్టా? 
ఈ (పశ్నలకు నమాధానంగా కింది సిద్ధాంతాన్ని ముందుగా నిరూపిద్దాము. ఇక్కడ. M = 
I అలా (౧-1 అనె మా(తికను ముఖ్యంగా ఉపయోగిసాం కాబట్టి దీనిని. మౌలిక మా|తిక 
fundamental matix) అంటాము. 


నీద్దాంతయు 2.10.1; (San) లో [వాసిన పీ కి సంబందించిన మార్కో_వ్‌ 


యి 
శృంఖలంలో M = (I —Q)]! ఉండి, M= ౫ (గా వాయవచ్చు. 


s=0 
౧రూవణ : సామాన్య మాతికా గుణకారం [ప్రకారం 
IQ) (ITQTAET... + (-*) = (1-0 2.10.2, 


1 ల-అయితే అవధిలో సంక్రమణస్థితిని ప్రవేశించే సంభావ్యతలు నున్న కాబట్టి (" ల్లోని 
మూలకాలన్నీ విడివిడిగా కూన్యమవుతాయి కొబట్టి (| సత, ౦ ae ల [కాట 
అనే నిర్ధారకము (determinant) విలువ అవధిలో నో QQ" 1. కాబట్టి, ॥ యొక్క, 
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బహుళ విలువకు సంబంధించి : 
1-0 20 
ల I—Q IZQZGFt.. + F0 
ala . గాక ఇక 0 1-9 ఉంటుంది. 
2.10.2 చి రెండువె వై వుల 1-6-1 చే గుణిస్తే. 

. 40+ ఆ వన న జ స Nut 
10 అయిత్తే అవధిలో ౮ 0 కాబట్టి, 

10000024 = I-Q-i=M 


pr పునరావృత స్ధితిని నా పూర్వము ఆదిలో ॥ సంక్రమణ క సితి 
ieC లో ఉండి మరో నంకమణస్థితి J (J వ C) ని (ప్రవేశించిన మొతం సర్టను' 
N, తో సూచి స్తే, N,. ఓక యాదృచ్చిక చలరాశి అవుతుంది. mM = E(N,. .) wank 
1 సం క్రమణస్థితి నుంచి మరో J Fe స్థితిని సగటున ఎన్నిసార్లు (వచేసించేది మ్య 
తెలుపుతుంది. 


నీర్ధాంతము '2,10.2 : (పతి 1, J ౬ ౬ లకు సంబంధించి, 
M = మ్య) . (2.10.3 


నిదావణ : ఆదిలో మార్కోవ్‌ శృంఖలం 1 స్ధితి (1౬ ౮) లో ఉందనుకో 
మొధటి మెట్టులోనే ఎదైనా పునరావృతస్థితి k k eC ని వు రె. seeds 
ke C’ 

ప్రవేశించగలిగితే, ష్య = 0,1౫ j.j౬€C. కాని ముందుగా 1 స్థితి నుంచి / స్థితి 
₹౬6౮) ని పవెశించి, దానినుంచి ] స్థితిని సందర్శించిన సారు |; కు సమానము, i= 
అయితే, J స్థితిని (స వెళించినసార్లు న ఇ ల. ర ee ఇక్కడ 1 ౫ J లేదా 
i= j పకారం ల్యె,— 0 లేదా = 1 న 

( లం > P, ౬ సంభావ్యతతో 

keC' 


అ 9 N,, = « 


ee N,, + లి: శ సంభావ్యతతో ళో “౩ C). 


. 
త్రీ 
Ld 
శ వె మ ల 
శకి + ఐత 
ఒ 3 


నా వ. లిన సై P,, EN, Fd) 
ke C' rec 
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64 
leC 
మా|తికా రూపంలో, (మ్య) ఆ [1-7-00 (మ్య) 
—0O౧ "l= 
లేదా, (మ్య, = (1 Q గ్‌, 


పె నంఖ్య Ns తుదకు పునరావృత స్థితిని |ప్రవేశించిక పూర్వము [ప్రక్రియ 
సం్మకమణ స్థి సితిని వవేశించిన సార్హను తెలుపుతుంది. కాని ఇది కాకుండా, వునరావృత స్థితిని 
[పవశించక పూర్వం (ప్మకియ సంక్రమణ స్థితులను మా(తమే ఎన్నిసార్లు సగటుని 'వవే 


శిస్తుందో తెలు సుకోవలెనని ఉత్సాహముంటి [= న్స N,. అనే యాదృచ్చిక చలరాశిని 
Je C 


పరిశీలించవలసి ఉంటుంది. 


- - నా / pe : 
నీద్ధాంతము 2108: = (య) Rp xy (మ క మ్య) అనేది 
JE 


ఒక దొంతి మ్మాతిక అయితే, 
(మి) = E(N))= స్క 180 


బిడూవణ : ఇక్కడ E (గ = m,;WiEeC 
m కా 3; E (N, ;) = న మ్య, 
JeC 1866 
మా|తికా రూపంలో (మె) = (2 "9 
 jecC 


ఉదాహరణకు, యాదృచ్చిక నడకకు సంబంధించిన కింది నంక్రమ. సంభావ్యతా 
మాిక విని పరిశీలించండి. 


1 q 0 p 0 0 
P= 2 0 gg 0 p 0 
3 0 0 - 6 0 p 
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ఇక్కడ 1, 2, 3 స్థితుల సమితి సంక్రమణ తరగతి 6 అవుతుంది. కాబట్టి ఈ స్థితుల 
మధ్యగల సం[కమ సంభావ్యతలే మూలకాలుగా ల మాతిక క. 


7/0 p 0. 
Q = q 0 ౫ 
0 gq 0/ 
/ 1 — Pp 0 
l1—-Q= ర్య 0  —p 
(0-6 1/ 
/p+q* ౫ q* 
= (ల = న్యాఖ ర్త . p 
qa  q a+p®/ 
M=(2 My = ea (రా? 29, 211 +a 2+9)), 


jeC 


ఇ 2 ఇల్లీ 
(పత్యేకించి, p= EY అయినప్పుడు, 


క్షే 
M= — 3 9 6 వ రేర్‌ = — (17 18 11). 
వ్‌ 1 ర్‌ 


సంక్రమణ తరగతి 0 ని వదలి, మార్కోవ్‌ శృంఖలం తుదకు ఏదైనా పునరా 
వృత స్థితిని _ప్రవెశించే సంభావ్యతలను కనుక్కొానే విధానాన్ని ఇప్పుడు పరిశీలిద్దాము. 
[గహించవలసిన మరో విషయమేమంటే మార్కో_వ్‌ శృంఖలం తుదకు ఏ పునరావృత స్ట సితిని 
_పవేశించిందోనన్న ది. ఆ స్థితి విలీన స్థితి అయితే తదనంతరం Fre ఆ స్థితిలోనే 
విలీనమవుతుంది. వ 


ప్రక్రియ 1 నంకమణ స్థితి 1] ౭ ౮ నుంచి ఆదిలో బయలుదేరి ఏదైనా వునరా 
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వృత స్థి సితి k (& ౬ న్‌. ని [ప వెశించే సము f. తో నూచించి, ఈ కింది సిద్ధాంతాన్ని 
నిరూవిద్దాము. 


నీద్ధాంతము 2.10.4: M, లు (2.10.1) లో పేర్కొన్న మాశ్రికలే అయితే, 
F= (fry MRiECKkEeC' .2.2.10.4 
౧ొరూనణ జ మార్కొవ్‌' శృంఖలం [పధమ. మెట్టులోన 1 సం|కమణ స్థితి (i ది C) 


నుండి k పునరావృత స్టీతి k ౬ ౮) ని (పవేశిస్తే, ల = ర్యా అవుతుంది. లేక పోతే, 
మరో ) నసం[కమణ స్థితి రి 0) ని ముందు (పవెశించి తదనంతరం & ని (పవెశి స్త సు, 


శ వ. = P;. fr i, je C;ke C") 
మాతికా రూపంలో 
వూ QF 
లేదా F=(1-Q)-1R= MR. 


ఉవనిద్దాంతయు 2:10.56: R లోని 11 వ దొంతిని క్కి తో సూచిస్తే C లోని 
కాల. స్టితుల "నుంచి ke (6“ని ని పవశించే సంభావ్యతలు MR. కు ప 


పె ఉదాహరణలో, 
/ 6 0 / 3 0 

R= 0 0 = 0 0 , p=? 
0 Pp, 0 క, 


ya F= MR =~ చే | 1 12 


1 14 7a 
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2.10.2 ఎర్హాణీక్‌ (ergodic) § నితులతో బిడదీ యలోమి నరిబిలో మాలో బ్‌ 
కో ంఖలాలు ; ఆనావ రితు నిస్సంశయ పునరావృత సి సితిని ఎర్తాడిక్‌ స్థితిగా నిర్వచించాము. 
పరిమిత మార్కోవ్‌ శృంఖలం 'విడదియ లేమి” నయితే, దాసికి ప్‌ స్థితి ఆవరణం 
లోని స్థితులన్నీ నిస్సంశయ పునరావృత స్థితులని ఇదివరకే స్పక్షిక రించాము. ఎర్గాడిక్‌ 
స్థితులుగల విడదీయలేమి పరిమిత మారో్కవ్‌ శృంఖలంలో n అనంత మైనప్పుడు నం|కమ 
సంభావ్యతల యొక )_ అవధి విలువల. నిర్ధారణను మనం (పస్తుతం చర్చిస్తాము. ఈ అవధి 
సంభావ్యత లను నిర్ధారణ చేసే కింది సిద్దాంతాన్ని ఎర్గాడిక్‌ సెద్ధాంతమని, అవధి సంభావ్యత 
లను ఎర్గాడిక్‌ సంభావ్యత లనీ విలుసారు. 


ఎర్జాడిక్‌ సిద్ధాంతము 210.6: ఎర్గారీక్‌ స్థితులుగల విడదీయ లేమి మ-స్థితుల 
పరిమిత మార్కో వ్‌ నా యొక్క సం[క్రమ సంభావ్యతా మాతిక P అయితే, 


(i) Lt [కా Lt P= [| = (™ ai గ) 2.10. 


వ -ఎా ౦00 nh —- 0 


ఇక)_డ n= (7, హై NO చు గ <1,j=1l,2, జ 00, 
రు | 
(ii) స్టా n=l. 


౧ొరూవణ : (2. 10. 5) ని నిరూపించోడానికిగాను ' m ఆ స్థితుల ఆవరణంలోని 
ఏ రెండు స్థితులు i; ]J కు అయినా, 1 జ = 7 j' అయ్యేటట్టు సం వాస్తవ సంఖ్య 
n—-o6 
గ ఉంటుందని రుజువు చెయవలె. ఇందుకుగాను, PM లోని j-వ దొంతిలోని కనిష్ట, 
గరిష్ట విలువలను m,™, M.® లతో నూచిసే, 0 4 మ (మ) <M, mM < 1. అకక 
కొల్ళొగోవ్‌ సమీకరణం (2. 3.8) ద్వారా. pa సితికి, 


m m 
(n+1) — (n) (1) tn) 
Py 2 DP చ 2 pM. 
గోగ్‌ (21) య Mm 
ప్ర 
ఇదేవిధంగా, m1 టై త. 


దీనినిబట్టి, {m,n} ఆనేది ఆరోహణ ఏక దిష్ష అను కమమనీ, (34) ౧). అవరోహణ ఏకదిష్ట 
_అనుకమమని (గ్రహించవచ్చు. ఈ అను. కమాల అవధులు ఉండాలి కాబట్టి వాటిని ms 
M, లతో నూచి సే, 

Lt mo = ము ; Lt MM = వేజ్‌, 


లే 
nh-—— 060 1-—->qQ 
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ఇప్పుడు ఈ రెండు అవధులు సమానమని 'చూపగలిగితే, (ఆవ్పుడు మి, = ఏషా? 
అనుకొంటే) Lt pM = గ అవుతుంది. దీనికిగాను, 4) = M0) -- [, లను 
nN > 00 

పరిశీలించండి. Lt 4,0) = 0 అయితే, సిద్ధాంతం నిరూపించిన లై. ఇప్పుడు, 


మవ లయ 


గ (చి M టే. m యాట 
J j J 


dat) —_ d= రాలి Mm ~ (m (n+l) _ మ(మ) <0 
క ) J J ) ] 


“dm || 


అనెది అవరోహణ వక దిష్ట అన్ముకమమవుతుంది. ఎర్జాడిక్‌ స్థితులుగ ల 
'విశదీయలేమి” m స్థితుల మార్కో_వ్‌ శృంఖలానికి ఏ 1, J లకు అయినా, po > 0 


ఆయ్యేటట్లు ధనపూ పూర్ణాంక ము N ఉంటుంది కాబట్టి సం|కమ సంభావ్యతా మా|తిక PND లోని 


కనిష్ట మూలకాన్ని ౫ తో సూచిసే, \~>0., (పతి 1 క్రి 


mm 
m+] N) — (N) (nN) 


కాని p,,M+1INn) = M.(M+IN) ఆయేఃటటు 1 ని ఎను, కోగలము. 


ఆదేవిధంగా By) = m5) అయ్యేటట్లు k' ని ఎన్నుకోవచ్చు. 


ఖ్‌ Mp MO Pye se x P, మ గా 
k £ k’ 
<< pa 0,0 (సయ శా pM 
j 
kek 
(N) » (nN) (nN) 7} N 
Spy mn" TMM (1—p) 
= Man _ [yen yp (nN NN 
j | ) స } Pi ( 
(nN) _ gq (tnaN) త ౭ = N : 
య M. ర A ( A య. ల కనిష్ట విలువ) 
. గ్‌ ఆణి వై = Mr 
ఇదే విధంగా pt ) = మల | pro) = M.™N అయ్యటట్లు i,k’ లను 
ఎన్నుకొంటె, 


మాటి > మ్మ రా J a ! గె 
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శ న — m GMFIN) MN) ./1— 

రేగే mm, Ss d, (1 2 
అంటే, గా! ND య రం be వగ) 
న్‌ (2N) (సృ) స్త 
(వత్యెకించి, ట్ర Ds d, (1 2౫) 

d (షి (2) (1 —. 
; << ర (1 2౫) 


(NU (1 — లి 
ss dD (1-29) 


d.MtTIM < dN (1 జే 2132 
) j 
(1—2X)< | అయితే, అంటె O<NA<3} అయి, 10,30 అయినప్పుడు 
ర్మణ _0. అంటె, ౧య|గ%౧ 6౬ సై అయితే, యో ౨0, 
(పతి n — L, 2; 3 599 క్కు 


(య మగ) లలో స్టే చ్‌ లేకే 2 <1 


కాబట్టి 0 ౬ gf <1, j= 1,2,3, ఎ, మె, ఇంకా పతి ౩ కు సంబంధించి 
m m 
j=1 j=I1 


సిద్దాంతాన్ని నిరూపించిన ట్రై. 


అవధి సంభావ్యత క ఆదిలో మార్కోవ్‌ శృంఖలం ఏ 1 స్థితినుండి బయలు 
దేరగిందో ఆ 1 స్థితి చె ఆధారపడదని గమనించవచ్చు. 1 ]లు సమాచార పునరావృత 
స్థితులు ఆయితే, (2.9.6) ; సిద్ధాంతం (2-/-2) (ప్రకారం, 


1 || 
Lt p...)=—f *¥ న అ 
13 13 
nNh—-> 00 Fj FP; 
శు ఎర్లాడిక్‌ సిద్దాంతం దృష్ట్యా [oe క క దీనినిబట్టి అవధి నంభావ్యతలు తెలిస్తే, పు నరా 


J 
వృత స్థితి 1 నుంచి మరో పునరావృతస్థితి | ని పధమంగా |పవేశించడానికి సగటున పట్టు 
పథమ పవెశకాలాన్ని నిర్ణయించవద్చు. J యమక న్నా ఆవ రన కాలము డే అయితె, 


d 
ట్‌ = హాని అవుతుంది. 
J 
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m 


2 ౨, =1 అయి, p= (Py Py... Pr) అనేది 
j=1 


అిర్వంచనోయు 2.102) 


సంభావ్యతా సదిశ (probability vector) అనుకోండి. ఏదై నా nN స్థితులుగల పరిమిత 
మార్కోవ్‌ శృంఖలంలోని సం్యకమ నంభావ్యతా మాతిక P కి జీంజపధంటి 
p= pP క స స ర 


అనే సమకాలిక వఏకఘాత సమీకరణాలు (simultaneous. linear equations) ఉంటే, 


సంథావ్యతా విభాజనము ర, )= 1, 25 .., మ) ను స్థావర విభాజనము (stationary 
distribution) అంటారు, 


(2.10.6) దృష్ట్యా, పతి J స్థితికి: 


ప= ౫ pp, 2.10.7 


m m 
p= ౫5 (2 Pr Pr;) P 
l= 2 = 
m m 
= 2% PB & py 0 
రూం. l= 
m 
జ (2) క 
2 Pr Py; (“. (8.8.8) ) 
సార్వతీకరించి వాస్తే, పతి n= 1, 2, 3, ... క్కు 
Dn 
Pp, = a Pr Pr: (n) ...2.10.8 
k=| 
(2.10.6) నిజమయితే, (2.10.7), (2.10.8) ల దృష్ట్యా, పతి [= 1, ౨3 ,., క్ర, 
ప చ= వైటు = 2 ౨ ...2 10.9 


అవుతుంది. (ప్మక్రియ యొక్క ఆది విభాజనము (initial distribution) 
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— 1\ = (౧) 3— గ్‌ా 4 (0) 3 (0) = 
P(X =J)=p,®,j=1L,2,..,m;pP>0, ౫ రగ = 
]=1 
సైవర నిభాజనమనుకొంతె, 
m m 
(0) — Oh. (On (య 
!s క్‌ 2 Pp జ 2 PD, Py 


r= | i=l 
(పతి he క 50 


క్షా, — P(X = j) 


= (n) = 
3 [ P;: nN) — p,0 
j= 1 
(పకియ యొక్క ఆది విభాజనము స్థావర విభాజనమని తెలి స్తే, దాని MS మెట్టు విభాజనం 
ఆది విభాజనంతో ఏకిభవిసుంది. ఇటువంటి [ప[కియ యొక్క పరమ విభాజనము కాల 
గమనము ॥ పె ఆధార పడనందున ఇది స్థావర పక్రియ అవుతుంది. ah te 
ఎర్లాడిక్‌ స్థితులతో విడదియలమి పరిమిత మార్కోవ్‌ శృంఖలానికి సంబంధించిన 
అవధి విభాజనము (7, 1 = 192, 33, మివ 7,20, ౫7, = 1} ఏకైక స్థావర 
విభాజనము (unique stationary distribution) ఆని కింది సిద్ధాంతం ద్వారా 
[గహించవచ్చు. 
నీద్ధాంతయు 2.10.8 : ఎర్గాడిక్‌ స్థితులతో విడదీయలేమి పరిమిత మార్చో_వ్‌ 
అ న. 
శృంఖలం యొక ౫_ సం[కమ సంభావ్యతా మాతిక P ఆయితే, సొ గ, = 1; TTP = Tl 
. j=l 
లేదా P || = || అయ్యేటట్లు ఒకేఒక అవధి సంభావ్యతా సదిశ ౫ = (౫| గ.) 


ఉంటుంది, ఇక్కడ 11 = (7% షా హి. 


నిడూనణ : సిద్ధాంతం (2.10.6) ద్వారా. 


Lt Pr = || 


h —> అల జ 
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దీనినిబట్టి, Lt Prt! = || 
| ౨-౨ 00 
అం లే, Lt వె P = TT 
పా ౦0 
లే TP = ||) 
హ్హ _ అవుతుంది. ...2 10 10 
ఇదేవిధంగా, P TT = TT 5 


(2.10.6), '2.10.10) ల దృష్ట్యా గ్య j= 1,2, 8 ..., య} అనే అవధి విభాజనము 
స్థావర విభాజమని రుజువు అయింది. ఇప్పుడు ఇది ఏకైక విభాజనమన చూవడా ఏకి, 


చై కా 1 = J Vv.p. ...2.10.11 


లేదా V=VpP, (V=(y, Vv VY mx TF (WViVg eV) 
అయ్యేటట్లు మరో సంభావ్యత సదిశ ౪ ఊందనుకొందాము. 


కాని LtyvPr=~nrdREYyIl]l=n .;.2. 10.12 


n_, 0 
(2.10.11) ద్వారా, 
vP = Vy 


vP2=yvP P=vV.P=Yy 


VP" =v 


కాబట్టి, Lt మలా క, 4424 10,13 


క 0. 


(2.10.12), (2.10.13) ల నుంచి, ౪ = 7 అని స్పష్టమవుతుంది. పె చర్చదాారా 


గ P= 7 కాబట్టి nm = (7, గా ॥ రం అనెది స్థావర విభాజన మని కూడా 


0 త 6 
స్పష్టమయింది. 

Pp తెలిసే, 7౬ 7” ౨ అనే సమకాలిక నీకమాత సమికరణాల ద్వారా పరిమిత 
మార్కోోవ్‌ శృంఖలం యొక్క అవధి విభాజనాన్ని నిర్ణయించ వచ్చు, ఉదాహరణకు, 
ఎ-స్థితులుగల మార్కోవ్‌ శృంఖలం యొక. సం[కమ సంభావ్యతా మా।|తీక 
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[0 + కే \ 
P= కశ శ్ర శ్రే 
\$ 4 0/ 


అయితే, అవధి విభాజనము ౫ = (7, గా గా) ను సాధించడానికి ఉపయోగించే సమ 
కాలిక వీకఘాత సమీకరణాలు ” = 7 వి. అంటే, 


క్‌ 
a 
ఆ 
| 
నఖ 
A 
౫ 
లే 
00|లు 
lr 
to 


ల్‌ 
bol 
Se | 
0 
be 


ఏటికి తోడు ప. అనే నియమాన్ని కూడా ఉపయోగించి, కింది 


స్యతంత సమికరణాల దూరా గ టల కత లను సాధిస్తే, 


్షే లి! 


ప స స ఖు. 
ఉగ — 97 +n = 0 
27, + తగా --6గ్ళా = 0 


వచ్చె అవధి సంభావ్యతలు ౫, = 0.3, గ్య = 0.4, 7 = 0,3. 


౨.10.లీ అనంత్‌ మారో. బ్‌ కొ ంఖులాలు : 3 మార్కవ్‌ శృంఖలాసికి 
సంబంధించిన స్థితి ఆవరణంలో గణనసాధ్యమై ఆనంత సంఖ్యలో స్థితులుం లె, ఆ మార్కో_వ్‌ 
శృంఖలాన్ని మామూలుగా అనంత మార్కోవ్‌ కృంఖలము (Tafinite Markov chain) 
ఆనడం పరిపాటి. నైద్ధాంత రిత్యా, పరిమిత మారో_వ్‌ శృంఖలాలకు, అనంత మార్కోవ్‌ 
శృంఖలాలకు మధ్య చెప్తుకోదగ్య భేదం లేకపోయినా, అవధిలో అవి [పవ ర్తించే తీరులో 
భేదం కానవస్తుంది. ఉదాహరణకు, పరిమిత మార్కోవ్‌ శృంఖలానికి సంబంధించినంత వరకు 
అన్ని స్థితులు సంక్రమణ స్థితులు కాజాలవని తెలుసు. కాని స్థితి ఆవరణంలోని స్థితులసంఖ్య 
గణనీయంగా అనంత మైనప్పుడు అవధిలో [ప్రక్రియ ఏవైనా పరిమితమై అభిన్న మైన స్థితులలో 
అనుకోవడం నమంజ సమవుతుంది. వరిమిత శృంఖలాలకు సంబంధించి నిరూపించిన లక్షణాలే 


14 మార్కోవ్‌ ఛృంఖలోలు 


ఉండదని ఆనంత మార్కో._వ్‌ శృంఖలాలకు కూడా దాదాపు వ రిసాయి కాబట్టి ఈ [వకరణంలో 
అ సాద్భశ లక్షణాలను గుదించి మా[తమ పసావించడం జరుగుతుంది. ఇది రూడా 
పునరావృత స్థితులతో విడదియలేమి అనావ ర్రిత మార్కోవ్‌ శృంఖలాలకు సంబంధించి 
అవధిలో వాటి ప్రవర్తనలను గురించిన విషయాలకు మా|తమే పరిమితమవుతుంది. 


సద్దాంతి ము 2.10.9: అనంత మార్కోవ్‌ శృంఖలంలో 1 ఏదైనా అనావ ర్రిత 
వునరావృత తరగతికి చెందిన స్థితి అయి, ప nవ మెట్టులో ] ఈాా 1 చెందే సంభావ్యత; 
Ms సగటు నిరీక్షణాకాలముమయితే, 


1 


Lt pp ఉంటూ Lt pl = ...2.,10.14 
1 


nl —> 0 | క -— 0 


ఇదేవిధంగా 1, ) స్థితులు ఒకే సమాచార తరగితికి చెందిన స్థితులయితే, 


l 
శన ™ BE Dee AGS 
1 —> 0 1 —-> 0 i 
సిద్ధాంతము (2.9.2) యొక్క నిరూవణ దృష్ట్యా (2.10.14), (2.10.15 లను నిరూవించడం 
కష్టంకాదు. 


డన నీడ్దాంతము 2 10.10: 1 స్థితి నిస్సంశయ పునరావృత స్థితి అయితే, 
Lt p=, పా0: 1 సితి సంశయ పునరావృత సితి అయితే, Lt Pp...” = 0. 
1 1 (థి ల థి il 


వ్‌ ఎంచి 00 nh —->0 


నిర్వచనం పకారం 1 గ్థితి నిన్సంశయ లేదా సంశయ పునరావృత స్థితి ఆయిన 
1 
[పకారం, ల్‌; ఉం లేదాకాంు అవుతుంది కాబట్టి రా అనుకొంటే, ఈ డవ 
ల 
సిద్ధాంతాన్ని నిరూపించిన క్షే, 
ఫలితాలు 2.10.11; సిద్ధాంతము (2.10.9 ఉపయోగించి కింది రెండు అవదులు 
నిరూపించవచ్చు. ఇందులోని నియమాలననునరించి, 


1 శై . 11 
nn Im వై wre 
Lt n > న్య ల్‌ 42,10, 16 


Ls] అయితే, 


1 | కీ 
Lt వ Die a2 1 


పరిమీత, అనంత మారో్కవ్‌ శంఖ లోలు 75 
2.10.16), (2.10.17) లను సెహారో (Cesaro) అవధులు అనడం పరిపాటి. 


కింది విధంగా నిర్వచించిన నూచిక యాదృచ్చిక చలరాశి ౪, ని పరిశీలిద్దాము = 


“1, చద్భ = అని తెలిసిన విదవ ౫ =| 

br ఎ «2.10.18 
J న = 1 1 
0, న 1 99 A య! 


స్పష్టంగా: PY, V=1)= P(X, =X =i)= p,™ 


m 0 


nh 

ఇక్కడ ౨, ల ఆదిలో (ప్మకియ 1 స్థితిలో ఉండి, ౧ మెట్లలో J స్థితిని సందర్శించిన 
m=!| 

మొత్తం పర్యాయాలను తెలుపుతుంది. ఆదిలో ॥ స్థితి నుంచి బయలుదేరి మొదటి 1 మెట్టలో 

మార్కోవ్‌ శృంఖలం తిరిగి 1 స్థితిని సగటున తిరిగి పవేశించిన పర్యాయాలు 


n 


l (01) దే పి అగ పదే ద 
అక 1 0; అవుతుంది. ఇదె విధంగా, J సతిని సగటున [లు శించిన పర్యాయాల 
mes] 
k — 
సంఖ్య — pI p;; అవుతుంది. ౧-0 అయినపుడు, పె సియమాలు 
n 
m=i1 


ప్రకారం అవధిలో [పక్రియ ఆదిస్థితి 1 తో సంబంధం లేకుండా (ప్రవర్తిస్తుంది కాబట్టి ఈ 
చర్చను పై ఫలితాలు అనుసరిసాయి. 

పరిమిత మార్కోవ్‌ శృంఖలాలలోవలె, ఇక్కడ రూడా గ, ని అనంతకాలంలో 
(ప్మకియ 1 స్థితిలో ఉండే అవధి సంభావ్యత అని పిలుస్తాము కింది సిద్ధాంతం ద్వారా 
అవధి సంభావ్యతల మధ్యగల ముఖ్య లక్షణాలను [గహించవచ్చు. 


నీద్ధాంతయు 2.10.12: C ఎదైనా ఒక అనావర్తిత, పునరావృత తరగతి 
అయి, Lt కిల =శ్యాం0౦ అయ్యేటట్టు ౮లో ఒక స్థితి! ఉంది, ఇ, ా 0 


హాయి. 


అయ్యేటట్టు ౧లో మదో) స్థితి ఉంటుంది. 


ఎందువలనంటే, i J కాబటి p,..” = >0, p.m = ఈ పా0 
రం లు 13 J} 


అయ్యేటట్లు పూర్ణాంకాలు nm ~>0 ఉంటాయి. చాప్‌ మెన్‌ - కొల్ళొగోవ్‌ నమీక రణం 
2.3.8 ద్వారా 


76 మారన్‌ శృంఖలాలు 
జ్‌ లై జ్‌ ల జ్‌ = «eB pao 
[సాలు అయినప్పుడు అవధిలో 
7, ౩.46 7% 0; 


ఇప్పుడు ఎర్షాడిక్‌ స్థితులతో నిడదీయలేమి అనంత మారో)_వ్‌ శ్చంఖలం యుక్క 
అవధి ఐభాజనాన్ని నిర్ణయించే విధానాలను కింది సిద్ధాంతం ద్వారా నెలకొలుదాము. 


నీడ్డాంతము 2.10.18: ఎర్గాడిక్‌ స్థితులతో విడదీయలేమి మార్కోవ్‌ శృంఖలానికి 
సంబందించిన అవధి సంభావ్యతలు గ 1 డాడి 0, 1; ఇ ఈ అయితే, 


రి గ 
స్ట చు నై గ క? ] చా 01 ద ం., | 
i=0 | ...2.10.19 
“అత్‌ కక... 


ఈ అవధి విభాజనము {7 = 0, 1, 2, eof స్థావర విభాజనము కూడా. 


సిద్ధాంతము (2. 10. 13) పరిమిత మార్కోవ్‌ శృంఖలానికి నిరూపించిన సిద్ధాంతా 
నికి సార్వ[తిక ఫలితమవుతుంది. అనంత సంఖ్యలో ఉన్న అజ్జాత విలువలు షై కోస 
అనంత సంఖ్యలోని సమకాలిక ఏకఘాత సమీకరణాలను హంత అనంభవం కాబట్టి 
౫, లను నిర్ణయించడానికి (2.10.18) ని సూటిగా ఉపయోగించజాలము, కాని ఈ సమీకర 
కణాలను ఉపయోగించి సంభావ్యత జనక [ప్రమయాలను కనుక్కొని; వాటి ద్వారా అవధి 
విభ్రాజనాలను నిర్ణయించవచ్చు. ఇంక, (2.10.18) నుంచి 


1 0 
09 CO రం ర్‌ 
గ = = (2) 
ష్ట్ర | 2 ష్ట్ర ర న్‌ | 2 గ. | 2 P;; Pi > గ్‌ ర +, 2.10.20 
J=0 1=0 J=0 120 
య యం 00 య 
= 1) = (n-1) — 
= 2 స HN x DP Pum 
j= 0 1 = ]J= 0 1౯220 


యి 
భే = ఫై స్ట P;; య. hie; లి, 3, 4, అ లిచి 9౪ 
i=0 


పరిమిత, అనంత మార్కోప్‌ శృంఖలాలు 77 
దీనినిబట్టి 0 3 = 0,1,2, ..., స్థావర విభాజనమని రుజువు అవుతుంది. 


మరల మార్కోవ్‌ శంఖలం వివిధ స్థితులను ఆకమించే కొలాలను బట్టి ఆవది 
సంభావ్యత లను నిర్ణయించే విధానాన్ని తెలుసుకొందాము. ఆదిలో 1 స్థితి నుండి బయలుదేరి, 
మొదటి ॥ మెట్టలో ఏదైనా) స్థితిని ఆక్రమించిన సార్దను NN, తో నూచిస్తే, ఈ ॥ మెట్టలో 


l 
j స్థితిని మార్కోవ్‌ శృంఖలం సగటున ఆక్రమించే కాలము _N,, అవుతుంది. అవధి 
@ n 1) 


సంభావ్యతలు 1 0 అయినప్పుడు [ప కియయొక్క_ విభాజనాన్ని నిర్ణయిస్తాము. కాబట్టి 
విభాజనం యొక్క పౌనఃపున్య పివరణననుసరించి _పష్మకియ వివిధ స్థితులను సగటున 
ఆక మించే సార్ర్హనుబట్టి ఆవధి సంభా వ్యతలను తెలియ చెప్పవచ్చు. ఈ ఫలితాన్ని కింది 
సిద్ధాంతం ద్వారా [వాస్తాము, 


నిద్ధాంతము 2 10.14 : 


1 nh 


1 1 
హి (n)) = Ee Wet 
En E(N,,™)= Lt ~~ పై ga జస 


1.౨౦0 ఓ .౨* (౦ m= |] J 


(2.10.18) లో నిర్వచించినట్టు సూచక యాదృచ్చిక చలరాశి ౪, ద్వారా 


\ 


n n 
5 (మ) E ya మ 2 Ps 
m=i1l m=1 
il | a 1 
ఠి ee / n) wa లా Mls 
శ LW rE bE j= n వ Dp ij ల్‌; ఫ్‌ 
n—- 0 n — —- య 032 11 J 


అవుతుంది. 


ర్‌ 


సామాన్య మారో WE ప రియలు 


(SIMPLE MARKOV PROCESSES) 


లె. 1 ఉపోద్దాతము 


మొదటి ఆధ్యాయము ( 1.2.1) లో మార్కోవ్‌ (ష్మకియను కింది విధంగా 
నిర్వచించినాము. వరామితి సమితి, శ గా స్థితి ఆవరణ వీ గా (ర 4౬ T} యాదృ్భచ్చిక 
[ప్న కియ ఆయి, t, ter (1 =(0, 1, ల మె), శ్చ వ ఓ ఈ భి t_ య 


అయ్యేటట్టు పరిమిత లేదా గణనీయ అపరిమిత సంఖ్యల సమితిలోని (గ, 1, న్నే, ఓ 


బిందు సమితిని పరిశీలించండి. 5 లో (ప్రతి వాన్తవ విలువల సమితి కృ, క, =. క, 2 
కి సంబంధించి, 
P(X <x Eee త 
= P(X మ X త =౫) + లేకే. 


అయితే, {X,, 1 ౬ 1) ను మార్కోవ్‌ [ప|క్రియగా నిర్వచించినాము. T విచ్చిన్న వరామితి 
నమితి అయినప్పుడు, (సి 1౬ T} ను2వ అధ్యాయంలో మార్కోవ్‌ శృంఖలంగా నిర్వ 
చించి, మార్కొవ్‌ శంఖలాలను గురించి సమగంగా చర్చించినాము. T అవిచ్చిన్న పరామితి 
సమితి అయి మార్కవ్‌ నియమము (3.1.1) ను మౌటించె ణా సామాన్య మార్కొ_వ్‌ 
[ప[కియలను ఈ అధ్యాయంలో పరిశీలిద్దాము. 


గ i 
ఎదైన పరిశీలనా దృగ్విషయానికి సంబంధించి (0, t అనే కాలాంతరంలో 
కం కా సంఘటన సంఖ్య X ఆయితే, ఆ సంఘటనల నిర్గీత కాలాల వద్ద, ఈతే 
= [ప 29 i వద్దనే సంభ వించ నవసరం కతా ? సంఘటనలు ఏ నమ 
యము €” ౦ లోనైనా సంభవించవచ్చు. ఉదాహరణకు, టెలిఫోన్‌ ఎక్ప్‌చ్చేంజి 
వద్ద నమోదు అయిన టెలిఫోను పిలుపులు, రేడియో యాక్టీవ్‌ శిధిలావస్థలో వెలువడిన ఉ-అణు 
వులు, రోడ్లు పమాదాలు, దైపులో తప్పులు సంభవించడం వంటి సంఘటనలు కాలగమనంలో 
ఎప్పుడైనా t ౫ 0 ఉత్పన్నం కావచ్చు. (0, 1 లో సంభవించిన సంఘటనల నంఖ్యను 
వు తో నూచి స్తే, [పలి t > 0కు త ధన పూర్ణాంక విలువలనే తీనుకొనే యాదృచ్చిక 
చలరాశి అవుతుంది. {xX "t= 0} అనేది ధన పూర్ణాంక విలువలే స్థితులుగా గల యాద్చ 
చ్చిక పకియ, ఇటువంటి |వకియలను పూర్ణాంక విలునల |ప|కియ (Integral valued 
process) లేదా గణన [ప|కెయ (counting process) అని అంటారు. t>t0 treet 
ల వద్ద వరసగా !వ, 2వ, 3వ, ..,.., ౧వ టెలిఫోన్‌ విలువులు సమాన అయినా 
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యనుకోండి. అప్పుడు, 


= 2, ttt 
జారి వ =. 


దీనితోపాటు, (పతి పెరుగుదల ౫, ౫, (ఓ 8 ౫ 0) కూడా పూర్ణాంక విలువలనే 
స్వీకరించే యాదృచ్చిక చలరాశి అవుతుంది. | 


ఖర్మాగారంలో తయారై న ఇనపరెకు మిద t వై శాల్యంగల రకుపె ఉన్న లోపాల 
నంఖ్య ౫అయితే, {౫} కి గణిత నమూనాగా తీనుకొనే “పాయిజాన్‌ పకియి ను ఈ 
అధ్యాయంలో నమగంగా చర్చిద్దాము. జనాభా అభివృద్ధికి గణిత నమూనా తీసుకొనే “జనన, 
మరణ పక్రియ” గురించి కూడా పరిశీలిద్దాము. ఇందులో పతి జననాన్ని జనాభా సంఖ్యకు 
ఒక పెరుగుదలగాను; (ప్రతి మరణాన్ని ఒక తగ్గింపుగాను పెర్కొంటాము. ఈ పెరుగుదల, 
తగ్గింపు గురించి చెసే ఉ పక ల్పనలు ఈ (పక్రియ, ఒక సామాన్య మార్కోోవ్‌ (ప్మక్రియగా 
రూపొందేటందుకు అనువుగా ఉంటాయి. ఈ ఉపక లృనలలో కొద్ది మార్చు చేసి, వెర్వీరు 
రకోల జనాభాలకు పరస్పర భిన్న మైన [ప్యకియలు గణిత నమూనాలుగా రూపొందుతాయి, 
ఉదాహరణకు, ఏదై నా జాతికి సంబంధించిన జనాభాలో అంటువ్యాధి వ్యాపించిన బీవాలనే 
పరిశీలించేటప్పుడు (0, + లో అంటువ్యాధి వ్యాపించిన జీవాలను ౫ త్‌ నూచించి {X,} ని 
శుద్ధ జనన (పృకియ (Pure birth process) నమూనా ద్యారా వర్ణించ వచ్చు. 
నిర్వాభనము 3.1.1: (0, ౯ లో సంభవించిన మొత్తం సంఘటనల సంఖ్య ౫, 
అయితే, [క్యు t = 0. అనే [ప్రక్రియను గణన ప్రక్రియ అంటారు 


ఉదాహరణాలుగా, (2) కిరాణా దుకాణంలో + క్షణానికి [వవేశించే మొత్తం కొను 
గోలుదార్డ సంఖ్య ౫ అయితే, $౫, ఈ = 0} అనేది గణన (ప్రక్రియ అవుతుంది. ఇక్కడ 
కొనుగోలుదారు దుకాణంలోనికి |పవేశించడాన్ని “సంఘటన గా భావిస్తాము. (0) బిడ్డ 
జన్మించడాన్ని “సంఘటనని గా భావించి € సమయానికి సంభవించే జననాల సంఖ్యను చేర 
తో సూచిస్తే, (వక్క t 2 0) ను గణన ప్రక్రియ అని విలవవచ్చు. (0) € సమయానికి 
. చేసిన ప్రైెపులోని తప్పులను క తో నూచిస్తే, (౫, 1 = 0} ను గణన పృక్రియ అవు 
తుంది, ఇక్కడ పెపులో తప్ప సంభ వించ డాన్ని “సంఘటన *గా భావిస్తాము : 


పె నిర్వచనం (పకారం (ప్రతి గణన పక్రియ . క, t = 0} కు, 


(i) X 2 0 


80 సామాన్య మార్కవ్‌ (ప క్రియలు 
(1) 1లో ౫, పూర్ణాంక విలువల ప్రమేయము. 
ij t. <t. అయితే, ౫X న, 
(11) ప్ర న మా (్స 


(iv) వతి <b, (tte లో సంభవించిన సంఘటనల సంఖ్య 
X,. —X,. 
to ఓ 


బిర్హంచనోయు 3.1.2: ఎ గణన (ప్మకియ {X, t —~> 0. కు సంబంధించిన 
వివర్జిత కాలాంతరాలలో జరిగిన నంఘటనల సంఖ్యలు స్యతం|తాలవుతాయో, అట్టి {xX} ని 
స్వతంత వెరుగుదలలు (independant increments) గల గణన [పక్రియ అంటారు, 

అంటే, (0, 5, (5, t లలో సంభవించిన సంఘటనల సంఖ్యలు య్య 9 — గ 
యాదృచ్చిక చలరాశులు కాబట్టి నిర్యచనం దృష్టా య్య, X — xX లు స్వతం[త 
యాదృచ్చిక చలరాశులు కావలెనన్నమాట. ఇప్పుడు పై ఉదాహారణలను పరిశీలిద్దాము. 
(b) కి సంబంధించి స్వతంత పెరుగుదలల ఉపవకల్పన సమంజసం కావచ్చుగాని, (a లో 
కాక పోవచ్చు. కిరాణా దుకాణంలో చాల ఎకు, వ మంది ఉన్న ప్పుడు కొ తగా వచ్చిన 
కొనుగోలు దారు ఆ గుంపును చూసి దుకాణంలోనికి [పవేశించకుండానే వెళ్ళిపోవచ్చు: 
ఒకకసారి ఆ గుంపును చూసి కొనుగోలుదారులకు అనుకూలంగా ఉండు అమ్మకం 
ఏదైనా జరుగుతుందేమోనని మరికొంతమంది ఆ దుకాణంలోకి పవేశించవచ్చు. ఏది ఎమెనా 
ఇట్టి పరిస్థితులలో (2) లో సూచించిన పెరుగుదలలు స్వతంతాలు కాక పోవచ్చు. (0) లోని 
[౫ (+ కూడా స్వతంత పెరుగుదలలుగల గణన ప్రక్రియగా అంగీక రించలేము. చెపు 
చేయడంలో ఎదుర్కొనే అలసట దీనికి కారణంకావచ్చు. 


నిర్శం చన ము న ఏ ఆంతరంలోనై నా నంభవించే సంఘటనల  విభాజనము, 
ఆ అంతరం పొడవువైననే ఆధారపడితే, వాటికి సంబంధించిన (ప్మకియను స్థావర 
(stationary) లేదా సజాతీయ (homogeneous) వెరుగుదలలుగల (పక్రియ అంటారు, 


అంటే అన్ని t, చు to ఓ > 0 లకు, ష్‌ జా ఖే స! టో స్ట (ఖలు 
ఓకే విభాజనాన్ని అనుసరిస్తే, xX, [టై 0) స్థావర పెరుగుదలలుగల (వ్యకియ అవు 
తుంది. గిరాకి హెచ్చుగా ఉండే [పత్యేక సమయాలు ఉంటె, 2) లోని _(ప్యకియను స్థావర 
వెరుగుదలలుగల గణన [ప కియగా అనుకోవడం అసమంజసము. (b) లోని (వక్రియను 


స్థావర పెరుగుదలలుగల గణన [ప్రక్రియగా అనుకోవచ్చు కాని, (0) ని స్థావర (ప్రక్రియగా 


స్వీకరించలేము. [పారంభ దశలోని తప్పుల సంఖ్యకం టే అంత్య దశలోని తప్పుల సంఖ్య 
ఎకు ్మ_వగా ఉండ వచ్చు, 


ముందుగా ఈ అధ్యాయంలో అవసరమయ్యే మార్కోవ్‌ (పష్మకియల కొన్ని 
ముఖ్యమైన సాధారణ ధర్మాలను పెర్కొ ంద్దామ్లు, 


నమో 
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5, విచ్చిన్న స్థితి ఆవరణతో (౫, t= 0) అనేది మార్కోవ్‌ [ప్రక్రియ అను 
కోందాము. దీని సంక్రమ సంభావ్యతా మ్మాతిక Pp == (1,౨) అయి, కా 
P(X, జ స్మా i) వ క్షే je 5 అయితే, సంకమ సంభావ్యతలు, ఫైన, కింది 
లక్షణాలను పొంది ఉంటాయని తెలుసు. 


(1) ర్ట = 0, లే టా 0 క 
1౬5 
ii) p= 2 pp, st>0 | 
1) kes 1 J (య హా | 
(iv) య్‌ 1లో ఒక అవిచ్చిన్న [పమయము 
3) Ue 

(vy) 1 క '— ర్మ | 
(౨0 J 


ఈ లక్షణాల దృష్ట్యా, వై యొక్క అవక లనాలను కింది విధంగా సూచిస్తూ [వాయవచ్చు. 


1— 0 
liz) 
bo 3.2.2 
p..®) mre 
hae Dt Up 0), స )ఎద౬5, 1721) 
ij | 0 t iJ 


ఇక్కడ ౫, ౫, లు (ప్మకియ యొక్క. కీవతలు (intensities లేదా సం|క్రమ రేట్లు 


(transition rates) ను తెలుపుతాయి. 


మార్కోవ్‌ (ప్రక్రియ యొక్క (3.2.1) లోని (111) ని చాప్‌మెన్‌ కొల్కొ[గోవ్‌ 
సమీకరణమంటారు, దిగువ [పకరణాలలో మనం చర్చించబోయే వివిధ సామాన్య మార్కోవ్‌ 
ప్రక్రియల విశ్లేషణా విధానంలో ఉపయోగించే సమీకరణాలను 3.2.1) ద్వారా నిరూ 
పిస్తాము. (3 2.1) లో $= గీ 1 ని పతిషేవిస్తే, 


+A = ఓ t 32 
p,, An 2 py pA sa 2 9 
keS 


82 సొమాన్య మారో,వ్‌ (ప క్రియలు 


== (ఓ) (At) (tn (At) 
త Bx Py TPP 
k వడ) 


రెండువై వులనుండి ర," ని తీసివేసి, గ్ర తో భాగిస్తే, 


p..t+A _ p(t) a (At కే 
1] 1] = YF న్న (ఓ) Ej +p, (tt J 
At k £ J] AF దః 
At —__ 0 అయితే, అవధులు ఉంటాయికాబటి, 
రు 


p= mu ark pe (0) గ 4.3.2.4 
k 2 j 


స్థిర 1 విలువకు (8.2.4) సమఘాత అవకలన సమీకరణాలను సూచిస్తుంది. వీటిని పురో 
గమన కొల్మొ[గోవ్‌ సమీకరణాలు (Forward 10108107? equations) అంటారు. 
ఇదేవిధంగా, (3.2.1) లో 1 ్న 5 [పతిశేపించి, 


P;. (Asts) = సై 2, Ap, 
1) 
kes 


రెండువె వుల నుండి స్య! ను తీసివేసి, ఇరువై వులను /1 5 తో భాగించి, స 5 — 0 
అయిలే, అవధిలో (s బదులు t ని వాడి వాస్తే); 


rt) — (ty) (ఓ) పే Ya 
P;; | జ్‌ లే k Ps సె P;, స: లు 
J 


స్థిర ) విలువకు (3.2.5) సమఘాత ఆవకలన సమీకరణాలను సూచిస్తుంది. వీటిని తిరోగ 
మన కొల్మొ[గోవ్‌ సమీకరణాలు (Backward Kolmogrov equations) అంటారు. 


సం|కమరేట్లు ౫.. మూలకాలుగాగల మా (తిక 
జీ, 1] 


00 01 02 


A మా > @ .3.2.6 
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PH = (గక) అయితే, A మాకిక (పక్రియ యొక్క సంకమ రేటు మాతిక 
1] | 

(transition rate matrix) అంటారు. ఈ మా।కతిక సంకేతంలో (3.2.4), (3.2.5 లను 

దాస్తే, పురోగమన తిరోగమన కొల్మొ[గోవ్‌ సమీకరణాలు వరసగా, - 


0/00 = P(t) గీ మ 
“ HI] 
p'(1) వ్‌ గీ p(t) 


P(0) = (ల...) = 1 అనే నమీకరణాలు (3.2.7) లకు ఆదినియమాలు (initial conditions) 
1) 
ఆవుతాయి. మామూలుపద్ధతులలో (3.2.7) అను సాధిస్తే, 


pt — exp At = | -- ఫై మా స 4,2 
క్‌ n=l | 


A పరిమిత మా(త్రిక అయినప్పుడే (3.2.8) అభిసరణ శ్రేణి అయి (3.2.4), (3.2.5) లకు 
కూడా ఎకైక సాధనం అవుతుంది. గని వికర్ణమాతికగా చేస్తే గ కింది రూపంలో 
ఉంటుంది. 


A = QDQ-! 


ఇక్క_డ D, గ మాతిక యొక్క విభిన్న బఐగిన్‌ (eigen) ఏలువలు మూలకాలుగాగల వికర్ణ 
మ్యాతిక. అంటే, D = [6, ... Ay. 


‘ PO =exp QDQ-lt 


౮౦౧ Q- 


n! 





= Q || | న్‌, hn! : [౫ 
= n=l ప 
= (లయం! 4.౫.2.9 
ఇక్కడ aDt = fei, మ యే 


లో.జీ.0 అవధి బిఖభాజనాలు ; మ్లారో,_వ్‌ శృంఖలాలలొ ఇవధ్ధి సంభావ్యతలకు 
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సంబంధించి నిరూవించిన సిద్ధాంతాలకు అనురూపంగా మార్కో_వ్‌ పక్రియలలో కూడా అవది 
విభాజనాలకు సంబంధించిన సిద్ధాంతాలను చర్చించవచ్చు. కొన్ని ముఖ్య సిద్దాంతాలను 
నిరూపణ లేకుండా కింద ఇచ్చినాము. 


నీద్దాంతయు 3.2.1 : విడదీయలేమి మార్కోవ్‌ [ప్రక్రియలకు సంబంధించిన అవధి 
విభాజనానికి Lt సా =m, మ 6౯5 5 లోని స్థితులు, n బట్టి (పతి 1 ౬౯ఏకి, 


t-—_3 0 


౧౬5 


t 3౨ అయినప్పుడు, ఆవధి ఉంటుందనుకొన్నా, అవధి సంభావ్యత 1, t పై 
ఆధారపడదు. అందువల్ల అవధిలో, 


D "(ఓ వాయాయస్హ్టే 0, (౨౦౦ «3.2.10 


కై 
ఇప్పుడు. గా = ౫) కనక (3.2.10) ఆధారంగా (3.2.4) ని వ్రాస్తే 


(౯), టా జం గ A.» 1865 all 
k ఇ] 


8.2.11) ను మాికా సంకేతాలలో వాస్తే, 
74 = 0, ప హస సజ. ead 212 


మార్కోవ్‌ [ప్రక్రియ యొక్క అవధి విభాజనాన్ని నిర్ణయించడమే మన సమస్య 
ఆయితే, పె పె కొల్మొ[గోవ్‌ నమీకరణాలను వాసే అపు. సం|క మ రెట్లు ల ను 
కనుక్కొాంటేచాలు. 


సజాతీయ సమీకరణాలు (3.2.12) కు శూన్య నదిశ (0, 0, 0, ...) సాధన 
మవుతుంది. కాబట్టి అహన్య ఏకైక సాధన పరిష్కారం కోనం (3.2.12) తో పాటు, 
అదనంగా గ గ Fy 7... = 1 అనే నియమాన్ని కూడా విధించవలె. ధన అవధి 
నంభావ్యతలు {గ న్‌, సహ 1} గల విడదియల్లేమి మార్కోవ్‌ ప|కియను సిస్సంశయ 
శనికి మారో_వ్‌ (వ, కియో (Positive recurrent Markov process) ఆంటారు. 
rr మె 0, 1,2, ee} ఎకైక అవధి విభాజనమని (గ్రహించవచ్చు. విడ దీయలేమి. 
పరిమిత మార్కవ్‌ (ప్మక్రియలు ప నిస్సంశయ 7 మారో_వ్‌ [ప్మకియలె 


అవుతాయి, 


నీదధ్ధాంతయు 3.2.2: విడదీయలేమి నిన్సంశయ వునరావృత మార్కోవ్‌ (ప్రక్రియ 
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యొక్క. ఆవధి విభాజనం కూడా స్థావర విభాజనమవుతుంది. 


అంటే, ఆదిలో pO? = nr ;n= 01,2... అయితే, న =, 
స t. విడదియలెమి మార్కొవ్‌ శృంఖలాలలో నిరూపించిన ధర్మాలతో పోల్చి చదివితే, వె 


ఫలితాలు సులభ గ్రాహ్యాతాలవుతాయి. 


తి.తీ పాయిజాన్‌ (పక్రియ (Poisson process) 

(0, t లో నంభవించిన సంఘటనల సంఖ్యను గ తో సూచిసే, {xX t > 0} 
గణన |ప|ుకియ అవుతుందని తెలుసుకొన్నాము. పతి 5 t క్కి ఘటన 
X =j ర్య జ యొక్క షరతు సంభావ్యతను కింది విధంగా సూచిద్దాము. 


P,;(s,.t)y=P(X=] XK=i) (bi=06,2,...) «331 


ల్‌.లీ.. నాయిజాద్‌. న్రీంకతాలు * ఏదైనా పరిశీలనా దృగ్విషయానికి సంబం 
ధించిన సంఘటనలు కింది ఉపక ల్పనలకు అనువుగా సంభ వి సాయని అనుకొందాము : 


(2) {%,t2= 0) అనేది న్వతం[త స్థావర పెరుగుదలలు గల గణన ప్రక్రియ 


(b) పతి అత్యంతల్ప విలువ గ1కిి (t, t+ At లో జరిగిన సంఘటనలకు 
బెందిన సంభావ్యత లకు కింద పర్కొన్నట్టుగా ఓక ధనాంకం, గ ఉంటుంది; 


i) Pri (tttTAty= A At +Oo(At 


యి 
(1) > క (t,t + Aty=0(At. 
jJ=i-~-2 
ఏ టిని బట్టి స (tt + Aty=1—A A t+FO(A ఓ అవుతుందని 
గమనించవలె, (ఇక్కడ /్న1 t— 0 అయినప్పుడు, అవధిలో 
0 (At) 
At 





-- 0 ఆయ్యటట్టు ౦ (At) ని నిర్వచి సాము) 


(i) దృష్ట్యా, (t, t At అనె At పొడవుగల స్వల్పాంతరంలో ఒక సంఘటన 
లేదాi— 3 + 1 అనే సం క్రమం సంభవించే సంభావ్యత ౫ At +O (At) అనీ, 
(11) దృష్ట్యా (1) bl At లో ఒకటి కంచే ఎక్కువ సంఘటనలు జరగడానికి సంభా 
వ్యత ౦ (At) అనే అత్యల్ప విలువకు సమానమనీ |గహించవలె. 


పెన పేర్కొన్న ఉపకల్పనలను పాయిజాన్‌ స్వీకృతాలు (Poisson 
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postulates) అన్మీ ఈ సీకృతాలననుసరించి సంభవించే సంఘటనలను పాయిజాన్‌ సంఘ 
టనలనీ ‘Poisson events) అనీ అంటారు, ఏదైనా (5, 1) కాలాంతరంలో సంభవించే 
సంఘటనల సంఖ్య షా య్య అంతరం పొడవు, €--5 పె ఆధారపడుతుందని చూపవచ్చు. 
అందువల్ల (నష్ట ; 0, ను సజాతీయ (ప కియగా పర్కొాంటాము. 


పాయిడొోన్‌ [వేయక అొర్జంచన 3.3.1 * కింద నియమాలననునరించె గణన 
పక్రియ {x t= 0} నుగ (> 0) వరామితితో పాయిజాన్‌ (ప్యక్రియ అంటారు : 


i X=0 


il t పొడవుగల ఏ కాలాంతరంలోనై నా సంభవించే సంఘటనల సంఖ్య Xx, 


(12 0) అంక మధ్యమము ౫tగా గల పాయిజాన్‌ విభాజనాన్ని అనుసరించవలె, 
అంటే, (పతి వ్ర { - 0 రు, 


(టి 


P(X = | he 0 Im 





sS-+t 


ఈ నియమాల దృష్ట్యా (౫, 1 = 0} న్వతం్యత పెరుగుదలలుగల ప్రక్రియ అని చూత 
వచ్చు. ఇక్కడ 


n 
pP=P(X=n=P(X—X=n)= et A, n=0, 1, 


we త ¢ 


అంటే, ఎల -—X, X —-Xoలు ఒకే విభాజనాన్ని అనుసదించె పెరుగుదలలు కాబటి 
£ 0 t+5 రు 


వ్‌ 


పాయిజాన్‌ [(ప్య్రకియ సజాతీయ  పెరుగుదలలుగల గణన [ప్యకియ కూడా అవుతుంది, 
పొయిజాన్‌ [పక్రియ పాయిజాన్‌ స్వికృతాలను పొటిస్తుందని గమనించ వలే. 


నీద్దాంత ము 3.3.2: పాయిజాన్‌ స్వెక్పుతాలను పాటీసూ, pO) = P(X = 0) 
= 1 అయ్యే ఏ గణన (ప్రక్రియ (యు t= 0} అయినా పాయిజాన్‌ [పక్రియ అవుతుంది. 


నిడావణ : స్వికృతం (2) ని దృష్టిలో పెట్టుకొని, చాప్‌మెన్‌ - కొల్మొగోవ్‌ 
లట న్‌ 
సమీకరణం (3.2.1) ఆధారంగా, (పతి $ ఓ +t చ ఇ లకు, 


ర (5, u) = లా ఫ్‌ (5 t) Pin (1, u) 2.3. 2 
J 


అని [వాయవచ్చు, 


ఇందులో 5,1 లకు బదులుగా వరసగా 0, 1 t+ ్నt లను 'పతిషేపిస్తే, 


/ [రంగి 
PX = 0) = 1 కాబట్టి, 


వె (Ott At=>౫p;(bt)p, (tt+F At) 3.3.3 
J 
(పత్యేక విలువ 1 = 0 క్కు 
క్కి (91+ రీ = Po(Ot)-Bo (t,t + At) 3.34 
(పతీ 1 ౫0కు (3.8.8) నుండి 
py, (0, t+ At) = Py, (0, t) p,- (t,t + AD 


e 


wi Pon-1 (0, t) + రె! n (t, t T+ At) 


+ సా Py; (0, అలై (t, t+ దీ 3.3.5 
్ర కడ మలా 1, 2 
x సజాతీయ పెరుగుదలలుగల ప|కియ కారణంగా, Po, (0, t) = pe) 1 స్వికృతం 
(0) దృష్ట్యాను (3.8.4), (3.3.5) లను కింది విధంగా వాస్తాము, 
pan = pp 1 —NAtTO (At) «9.3.6 
pes = pa 1—\A\్నృt+O (At) 
py NAtETO(At +O(At) (౫0) ...3.3.7 
(8.8.6) నుంచి, 


(t+At) ఇ (ty) 
Po Po 


TAN: 


0 (At) 
At 


= (Fis 
A. P 


1€-- 0 అయినపుడు ఎడమవె పు పదము అవధిలో హ్‌ = pid 
స్తు యిణలబ్యు మైరల్లై అ ఆఅవథి rue : 


0 t 


A 
it) = — p(t 
Pr, NP = 43,3056 
ఇదే విధంగా, (8.3.7) నుండి, 


వం అని సన్‌ సారి. 3) 
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తొలి నియమాలు py =1,p0=0ను ఉపయోగించి (3.3.8), (3.3.9) అవకలన 
సమీకరణాలను సొధిస్తాము, (3.3.8) నుండి, py! = 1 దృష్యా 


py) = 6! అర 
(8.3.9) లో po = Ve (n=0,1,2, ++) ను (పతికేపిస్తే, 
p')=y (gt _ NV (0 అతా! 
Ti nn n 
— (V P(t) PN V e-&t. 
hn nn 
(ty) __ ty wht 
(V, గీ న ee f=—} (ర్వ) — వ్‌) 
జయ 1 Oey న. 
n వా 
లే (0 — t 
దా Ve Vv 


రెండు వై వుల t దృష్ట్యా సమాకలనం చేసే, 


t 
Vy (0 er స (t 
wr జ్‌ Ee dt 
0 
t=0 ఆయితే, C=-—-V(O0=(0 కాబటి 
nn ) 
{ 
(Lh స్ట 
V కతు Na dt (n= 1,2,...) 
0 
t 
wy (0) — స్ట వ 4 4 
_పత్యేకించి, Ms PN b Nw dt = At | న vr: = 1). 
0 
t 


ఫై. 9 

(t= ( 
Vs = గె VY dt= సలి నా 
3 | 
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గ్ర (సట 
Vis) Vv © dt = 
షే “7 n-1 n! 
0 





wa 


p (t) = V (ఓ) e-*t = 
స్టే స్ట n! 


gar n=1l,2, ౨3 అటి ® ౪ 3.3.11 


(8.3.10), (3.3.11) ల (ప్రకారం పతి ₹2= 0౦ కు 





Aty 
p”=P(X=n)= Ea ఆ. n=0, 1, 2, జ్‌ 1 


కాబట్టి నిర్ణిత కాలాంతరము, (0, t లో సంభవించే పాయిజాన్‌ సంఘటనల సంఖ్య పాయిజాన్‌ 
విభాజనాన్ని అనుసరిస్తుంది. దీని ఆంకమధ్యమము కా విస్తృతి = ౧1. 


పరిశీలనా పారంభము t= 0నుంచి కాక పకియ తొలి పరిశీలనా కాలము 
5 (5 పౌ 0) వద్ద పారంభమయితే, X = 1 అనుకొందాము. పె చర్చనాధారంగా కొద్ది 
మూలవిందువు మార్పిడితో కింది సంభావ్యతను సులభంగా సాధించ వచ్చు. 


Pp, (5 ఓ) = రె (క్స్‌ EE) జం , nai ! 


En buh 


|| 
శూ 


య 1, J 
దీనిని భెదించిన ఫాయిజాన్‌ విభాజనము (truncated poisson distribution) అంటారు, 


వై సంభావ్యతలు Be; Pp, (3, () సంఘటనలు సంభవించిన కాలాంతరపు 
పొడవు మీద ఆధారపడినాయి కాబట్టి పరిశీలించిన [ప్రక్రియ సజాతీయ పాయిజాన్‌ |వక్రియ 
అవుతుంది. ఇది సజాతీయ మార్కోోవ్‌ [ప[కియ కూడా. దీని సం కమ సంభావ్యతా 
[ప్రమేయము : 


మం =p; (tr ft) =P టట్‌ J me ( 
(6౨ ల ళ్ళ 


P (౫p = రః న క న టో i) 


ర్తీరీ సామాన్య మారో్కవ్‌ (ప్ర క్రియలు 


P(X —X =j-bX —X% =i) + 


= P(X —X =i—) 


లి 
ల | 
షస 
ఠి p..) ee (At ఉా ఓ ( యా శే | 
| (J =p)! [= క 19 
| 
= 0 


(3.3.18) నుంచి పతి) ౧1కి, 


Lt pp = 0 అని గమనించవలె. 
| వాతా 00 
సజాతీయ పాయిజాన్‌ [(ష్మకియ యొక్క అవధి సంభావ్యతలు సున్నకు సమానం కాబట్టి 
ఈ పక్రియ యొక్క స్ట్‌తీ ఆవరణలోని స్థితులన్నీ సంకమ స్థితులు లేదా సంశయ పున 
రావృత స్థతులవుతాయి. (పతి స్థితి 1నుంచి 3 (> 1) స్థీతి అవుతుందీ. కాని 3 స్టీతి నుండి 
1 నీతి |పవేశింపదగు సితి కాదని |గపాంచవలతె. 
థి థి 
(3.2.2), (3.3.13) అ నుంచి 


ట్‌ 1— అ! 
సత. వటి tls స రాయా న 
11 శ t 
t= 0 ను 0 
2 ఓ ]-1 e-At 
= Lt Hi = ప Sou Blok 
ళా 1 tee BE 
[| (3.3.14) 
ఖా 0, Jj — i > | ఖః 


(3.2.2) [పకారం ఈ Ns త్య లు పాయిజాన్‌ వ|కియ యొక. తీ వతలు 
అవుతాయి. (8.3.14) దృష్టా సజాతీయ పాయిజాన్‌ పక్రియ యొక్క తీవతలు సంభవ 
కాలము t చె ఆధారపడని స్థరాంకాలని గమనించవలె. 


లీ.లి.2 అంతలో ర)ంభొవు వ్యవ ధుల బిభాజానోము (inter-occurrence times 
distributions) : పాయిజాన్‌ సంఘటనలు ళీ వా 0. గం శః =, అనే నిర్ధీత సమయాల 


వద్ద మాతమె సంభ వించాయనుకొం టే, T, = t, లా శః ఫీ. = న — t, లు వరసగా 
1, 2, 3, ... వ సంఘటనలు సంభవించే వ్యవధుల కాలాంతరాలను తెలుపుతాయి. పాయిశాన్‌ 
స(కృతం (a) పకారం t, కు ముందు, తరవాత సంభవించి సంఘటనలు పరస్పరం 
స్వతంతాలు కాబట్టి, 1, 1, ...లు స్యతం|త యాదృచ్చిక చలరాశులని స్పష్టమవుతుంది. 
విటిని అంతర్సంభవ వ్యవధులు (inter occurrence times) అంటారు, ఏటికి సంబంధించిన 
కింది సిద్ధాంతాన్ని పరిశీలిద్దాము. 


నీడ్డాంత ము 3.3.లి-: రెండు వరనగా సంభవించే పాయిజాన్‌ సంఘటనల 
అంతర్పంథవ వ్యవధులు T,. Tp, ++ యిణఘాత (negative exponential) విభాజనాన్ని 
అనుసరించే పరస్పర స్యతం|త యాదృచ్చిక చలరాశులు. 


ణిథడానణ : (పతి€2 0కి [= 1,2,8; haves 


ఘటన "గౌ ౫t =భటన ౫ లాలన  =0- 
: ww el | 
n-— n—-l 
=P X=0 


కాసి Xx, అంక మధ్యమము ౫t గా గల పాయిజాన్‌ యాదృచ్చిక చలరాశి కాబట్టి, 
FPT tt ఆ తే 
- TT aa 
(పతి 20, 9 = 12, 3, ... కు, 7, యొక్క విభాజన ప్రమేయము 
P (T గ t) = 1—e-™ :.,3.3.15 


T'ల నంభావ్యతా సాందతా పమెయము (probability density function) 
d 
మ ఆ 
— {P(T <1} గ e , A>0, t20 


{XX (ల 0) సజాతీయ మార్కొ_వ్‌ పకియ కాబట్టి T,, Tos లు పరన్సర సృతం త 
యాదృచ్చిక చలరాశులని కూడా గహించ వను, 


t వద్ద పాయిజాన్‌ సంఘటన సంభవించ లేదని అనుకొంటే, ఆ తరవాత సంఘటన 
సంభవించడానికి పను నిరీక్షణా కాలమును మి తోను, క ముందు సంభవించిన సంఘటన 


ఫ్రీ2 సామాన్య నూరో గాన్‌ (ప (క్రియలు 


తరవాత కాలవ్యవధిని ఏ తోను సూచిసే, R, వ లు యాదృచ్చిక చలరాశులు అవుతాయి, 
కింది చితంద్వారా R, 5 ల నిర్వచనాలను వర్ణించినాము. 





న అలానే 
1 
| | | 
a p 
n—1 వ t 1వ 
ఘటన ఘటన 
సమయము సమయము 


[పస్తుతం R, న్‌ ల సంథావ్యతా విభాజనాలను పరిశీలిద్దాము, 
నీర్ధాంతయు 3.3.4: R, యొక్క సంభావ్యతా విభాజనము 
P (మ య్‌ x) = 1-e-= 2z2>0 ...9.3.16 


నిదావజ : పై చ్యితంలో వర్థించినట్టు శీ, ఖీ ల మధ్య t ఏదైనా ఒక కాల 
బిందువు అనుకొందాము, R ఈ 7౭ ఘటన పకారం re ఓ లో ఏ సంఘటన కూడా 
సంభ వించ లేదని అర్థము, కి య్‌ x, T జ er + xX T mr UA to] 
అనేవి రెండు తుల్య సంఘటనలు కాబట్టి 


P(RSx)= వగ్భ్నౌాకళం-ల్నలాని T>t—-t)) 


న్‌ జస న చ న న క | 
POSTS) 
P T >t—t 
టె nl 


కాని సిద్ధాంతం 8.3.3 |పకారం; 
క (గా మల్టికా 1-౪ 
= P (R, య గ్‌) = | క్షే --- ఫె ల టో న) లా { 1 — . (1 జ 


ఫ్‌ (t = క్ష 


పొయిజాన్‌ (ప (క్రియ 93 


= శారీ న్‌ x~>0. 


నీధ్ధాంతయు 3.3.5: న యొక్క నంభావ్యతా విభాజనము 


P(S కశ) = 1 6 9 0a ౫గ క 1 & స 
జు. శత. 


టే 


౨ (వ = x)= 6 x= 1 


ణిరూవణ : మొదట్లో (0, t లోఏ సంఘటన నంభవించలేదని అనుకొంటే, 
సిద్ధాంతము (3.3.3) దృష్ట్యా, 


P(S =t=P(T>ty=e" : 


మరల (0; t లో కనీనం ఒక్క సంఘటన ఆయినా సంభవించిందని అనుకొందాము, ౫ని 
(4-౫, + లో కనీసం ఒక్క సంఘటన ఆయినా నంభవించడానికి వ్యవధి ఉండేటట్టు ఎన్నుకో 
గలిగితే, పతి౫ = (0కి 


P (వ కం et స { (t శశ లో కనీసం ఒక్క సంఘటన ఆయినా 
సంభ వించడం | 


i—P | (be 1; t లో ఒక). సంఘటన ఆయినా 
సంభవించదు | 


1—P(X =0)= 1— e6 =, 


౧ యనిర్‌ 4 సిద్ధాంతము 3-లీ.3 ద్వారా బుణఘాత విభాజనం యొక్క ఒక (పత్యేక 
లక్షణం స్పష్టమవుతుంది.  బుణఘాత విభాజనాన్ని అనుసరించే యాదృచ్చిక చలరాశి 
అయితే (పతి s,st-—>0 ౧కు PTSst +s T>t=P(Ts 3). దీనినె 
ఈ విభాజనం యొక “ప రాకు” (forget ful) లక్షణమని అనడం పరిపాటి, దిని 
పరం 9వసానంగా (0, t లో నంఘటన సంభవించలేదని తెలిసినా, (0, s-+t లోనై నా 
తు సంభవించే షరతు సంభావ్యత, 5 సమయంలోపు సంభవించే తొలి సంభావ్యతకు 
నమానమవుతుంది. మనం పాయిజాన్‌ సంఘటనలను గురించి మాట్లాడేటప్పుడు ఏ సమయం 
వద్ద నుంచి అయినా సంఘటన సంభవించడానికి పై నిరీక్షణా కాలం యొక్క సంభావ్యతా 
విభాజనము 'బుణఘాత విభాజనంిగా తీసికొంటాము. 


లొ.లొ.లొ నిరీశీంచుకాల బిఖాజానోయు (waiting time distribaiton) : కొన్ని 
పరిస్థితులలో ' నిర్ణిత సంఘటనలు సంభవించడానికి వే వ్యవధి యొక్క విభాజనంతో 
ఉత ఏర్పడుతుంది. nవ ఫాయిజాన్‌ సంఘటన సంభవించడానికి నిరీక్షించుకాలమ్ము 


94 సామాన్య మార్కప్‌ (ప క్రియలు 


n 

Ww తో సూచి సె, ₹/ ఈ T. సిద్దాంతం (3.3.3) పకారం T, 
(r= క sew n) లు ఒకె బుణఘాత విభాజనాన్నే అనుసరించె 1 పరస్పర నంతం|త్ర 
యాదృచ్చిక చలరాపలు కాబట్టి మాత విభాజనవు సంకలన లక్షణం (additive property) 
దృష్టా ళ యొక్క విభాజనము క, ౫ పరామితులతో గామా (gamma) విభాజన 
మవుతుంది. దిని సంభావ్యతా సాం|దతా పమేయము 





xn 
నల న్‌ా లైల పా 0, t>0! 
| 
33.15 
= 0 J 3.3 
nn n | 
E(Ww)— ల ese = 
7 


దీనినే 'నిరీక్షించు కాలి విభాజనమంటారు. 


(3.3.18) ని కింది విధంగా కూడా నిరూపించవచ్చు. + సమయం వద్ద 2వ సంఘటన 
సంభ వించిందనుకోవడం, t సమయానికి సంభవించిన సంఘటనల సంఖ్య కనీసం ॥ అనడం 
ఒకటే, అంటే, గ <t = xX హ్‌: 


Fry (ty=P(W <t)=P(X>n 


'అల' క్‌ 
= 5 see 
రువ J! 


రెండువై వుల t దృష్టా అవక లనం చేసే Ww యొక్క నంభావ్యతా సాం|దతా [ప్రమేయము 





అ ) అ = 
fy (ty=— 2 Ae Ot) + 2 N eat (A) 
rn i J! Ted (పాటే! 


4 


n-1 al t\] 
= 6-t OY Y + ¥ he (Xt) ఆనా Xe a ) 


పాయిజాన్‌ (పక్రియ 95 


(Nt)! 
(n లా 1) | 


లీ.లీ.4 వీఠరూవ బిఖాజనోము : పాయిజాన్‌ |ప|క్రియకు, ఏకరూప (uniform) 
విభాజనానికి గల సంబంధాన్ని పరిశీలిద్దాము. 


=) ఠా! 


నధ్ధాంతయు 3.3.6 : (0, 7 లో ఒక పాయిజాన్‌ సంఘటన సంభవించిందని 
తెలిస్తే, అదె కాలంలో మరో సంఘటన నంభవించడానికి వట్టి వ్యవధి యొక్క విభాజనము 


dt 
P(t<T<ttd XK=1l)=—, O0<t<r ...3.3.19 
T 





బిటావణ : ఈ సిద్ధాంతంలో 


prt<T< i స wii FAST] 
n= 
=P(t<T<t+tdt).P(X,=1 T=t)-~P(X,=) 


— At —A(7T-t) Nr 


se dt. e = (re 


దీనితో సిద్దాంతం 3.3.6 నిరూవించినాము. 


(07 Ft <ty<.e<t<r అయ్యేటట్టు ఓ, f, +.t, © 
వద్ద n పాయిజాన్‌ సంఘటనలు సంభవించాయని అనుకొంచే, (0, 7 లో (రంల +c, t లి 
n యాదృచ్చిక కాలబిందువులు అవుతాయి. సిద్ధాంతం 3.3.6 ద్యష్యా, tty» 49 ల లు 
(0, 7 లో ఏకరూప విభాజనాన్ని అనుసరించే 1 [కమ సాంఖ్యకాలు (Order Statistics) 
అనుకోవచ్చు, (0, 7 లో ఏకరూప విభాజనాన్ని అనుసరించే ౫ స్యతం|త యాదృచ్చిక 
చలరాశులు U,, Ups cee ల యొక్క ఉమ్మడి విభాజనము 


| 
fry 5, U Woes ర్ట) = —— | OSU, un LT. 





కాని U ఫ్‌ ల లకు సంబంధించే n [క్రమ సాంఖ్యకాలు ts Sp ల యుక్కు_ ఉమ్మడి 


1 అ తి 
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ఏకాజ నము 





టి. (౫; vee9 న) = శ 3 0౫, కు 967 


న 
మన్నె కా త్త; (3.3.20 


(0, 7 లో ౬ సంఘటనలు సంభవించాయని తెలిసి, ఈ అంతరంలో మరెక,_డ ఏ సంఘటన 
నంభవించకుండా, (7,7 + A Tyas క క TA గా వంటి £ వివర్ణిత 
స్వల్స ఆంతరాలలోనే ఒకొక), సంఘటన సంభవించే షరతు సంభావ్యత 











AAT, ప్ర NAT. పు య vay 
లి rye 
hn |! 
ల. 
= ణు గాలం /% [| 


సంకేతాలలో, t, య్య గ << శ A స ల వద్ద వరసగా సంఘటనలు జరిగి ఉంచే, 


౨ (7కళేకల్నాగా రీ గామ కరా. రీగొ YT mn 


n |! 


= 





కు ANT) cee AT. 


సంభావత్యా సాం_దతా [ప్రమేయపు నిర్వచనం |వకారం, ఎడమవై వు సంభావ్యత ఉజ్జాయింపుగా 
భ్‌ వ ౭ చి రి ల (2,9 Cee. 7) A జ్‌. er PAN ye త్తు సమాన మవుతుంది. కాబట్టి; 


nl! 
శ. న t (1 కా గా) అ క. 0. స! క 


మళ్శామ T % sass d2l 


(3.3.20), '3.3.21) ల దృష్ట్యా “0, 7" లో ఏకరూప విభాజనాన్ని అనుసరించే ॥ స్వతంత్ర 
యాదృచ్చిక చలరాశులకు సంబంధించిన [కమ సాంఖ్యకాల ఉమ్మడి విభాజనము 


పొయిజాన్‌ (ప్రక్రియలు. ' - 97 


n! 
నాల్‌? అదే అంతరంలో ఏ కాలబిందువులు ts cer ft వద్ద. ౨ పాయిజాన్‌ సంఘటనలు 
గ్గా 


సంభవిస్తాయో, ఆ 1, *., క ల యొక్క. ఉమ్మడి విభాజనం ఏకీభవిస్తుంది. 


పె చర్చ ఆధారంగా ఎదైనా పరిశీలనలో ఎదురై న కొన్ని సంఘటనలు పాయిజాన్‌ 
సంఘటనలా * కావా? అన్నవాదనను పరీక్షించే విధానాన్ని రూపొందించవచ్చు. లేదా భౌతిక 
దృగ్యిషయాలను పరిశీలించెటప్పుడు దానిని రూపకల్పన చెసి (ప్మకియ పాయిశాన్‌ [పశక్రియగా 
తీసుకోవచ్చు అనే పరికల్పన (hypothesis) ను పరిక్షించడానికి వై ఫలితం సహాయ 
పడుతుంది. 


(పక్రియను పరిశీలించేటప్పుడు గా వ్యవధిలో, అంటే (0, 7 లోn సంఘటనలు 
సంభవించాయనసి, ఈ ॥ సంఘటనలు కూడా (0 <t, యం, మ శ్చ వో క్‌ అయ్యేటట్లు 
వరసగా t,, ..t, సమయాలవద్ద సంభవించాయనీ అనుకొందాము. ఇవి పొయిజాన్‌ 
సంఘటనలే అనే పరికల్పన సరి అయిండి అయితె, పై చర్చ |పకారం శే, క, ++ క లు 
(0, 7 లో ఏకరూప  విభాజనాన్ని అనుసరించే ॥ స్వతం్యత యాదృచ్చిక చలరాశులు 
అవుతాయి. కాబట్టి శః క 24 సీ లు-(0, గ్గ లో ౬ స్వతంత ఏకరూప యాదృచ్చిక 
చలరాశులు అనే పరికల్పనను పరీక్షించడం, ॥ సంఘటనలు పాయిజాన్‌ సంఘటనలే అనే 
పరిక ల్పనను పరీక్ష ౨చినర్తి అవుతుంది. 


(0, 7 లోtలుn స్యృతం[త ఏకరూప యాదృచ్చిక చలరాశులు ఆయి, 


లి 
E (t,) = =: Vv (శ) = a (1 చా కే ss«, n) అయితే, కేం దీయ సీమా 





సిద్దాంతం [ప్రకారం న్‌ = లి t, అనే సాంఖ్యక ము అవధిలో సామాన్య విభాజనాన్ని 
1= 1 


nT n 72 


అనుసరిస్తూ, E (వ) = Ta Vv (న్న) క్త Pan. కాబట్టి 5 ఆధారంగా చె 








పరికల్పన గురించి తీరు విచారించ వచ్చు. 


పె [ప్రకరణంలో t అవిచ్చిన్న పరామితి ఆనుకొని పాయిజాన్‌ సంఘటనలగురించి 
నమగంగా చర్శించాము. t విచ్చిన్న పరామితి అనుకొని € = 0, 1, 2,... అనే పూర్ణకాల 
వీందువుల వద్దనే సంఘటనలు సంభవిస్తాయని ఊహిద్దాము. ఒక కాలదిందువు వద్ద సంఘటన 
జరిగే సంభావ్యతను ౨ (0మ [క1) తోను, జరగని సంభావ్యతను 6 (=. — Pp) తోను 
సూచిద్దాము. ఇక్కడ సంఘటనలు స్వతంతాలని అనుకొంటాము, (0, ష్‌ లో సంభపించిన 
సంఘటనల సంఖ్య చ అయిత్తే పె పరికల్పన దృష్ట్యా x ద్విపద విభాజనాన్ని అనుసరించే 
యా దృచ్చిక చలరాశి అవుతుంది. పీని విభాజనము 

7 
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P (X = న్‌) = గే ete ను. 1, 2, ar 1 | 


కాబట్టి $౫, } బెర్నోలీ _వ్మక్రియ అవుతుంది. 


t=0, 1, వు, ల వద్దనె సంఘటనలు స్వతంత్రంగా నంభవిసాయనే ఉప 
కల్పన ఆధారంగా, సంఘటనల మధ్య పట్టె వ్యవధి విభాజనాన్ని పరిశీలిద్దాము. (n-1 వ 
ంఘటన సంభవించిన తరవాత 2వ నంఘటన జరగడానికి పట్టే కాలవ్యవధి 1 తో 
నూచి స్తే, 1 జ్యామితీయ విచ్చిన్నయా దృచ్చిక చలరాశి అని స్పష్ట మవుతుంది. దీని 
సంభావ్యతా విభాజనము 


యం 


P(T =x) = =-1 p క్‌ x= ll, 25 se 
ఇదేవిధంగా 1 వ నంఘటన సంభవించడానికి పట్టె నిరీక్షణా కాలము 
/ = సంవ బిందు 
WwW అకు) T, * ఇది విచ్చిన్న యాదృచ్చిక చలరాశి. ఇవ సంఘటన ౫వ కాలబీం వ్ర 
1=1 


వద్ద సంభ వించిందను కోండి. అంటే, (1 & 1) వ సంఘటన (౫ లా 1) వ కాలవీందువు వద్దను, 
1వ సంఘటన శవ కాలవిందువు వద్ద సంభవించ వచ్చు. దీని సంభావ్యత మొదలి (౫ ల్‌ J) ల 
వద్ద n-— 1 సంఘటనలూ, ౫ వద్ద [వ నంఘటన జరిగే సంభావ్యతకు సమానం కాబట్టి 


టం tf’ 
| (W = Xx) - pr-1 gE-D- MD op 
We]. 
x—1|1 « 
భా Drag 
s Wren 
~~ ఫాల 
మ pn నం x-n 
నా (౩) 


ఇది 1, Pp పరామితులుగాగల బుణ ద్విపద (Negative Binomial) సంభావ్యతా 
విభాజనము. : 


లో.లొ.లొ్‌ నాయిడొద్‌ (ైడ్రోయల లక్షణాలు = (రు ఓ ౮ అనే పాయిజాన్‌ 
[ప్మకియను పరిశీలిద్దాము. దీని పరామితి ౫ ఆనీ, సంభవించే పాయిజాన్‌ సంఘటనను రెండు 
రకాలుగా వర్షికరణ చేశామనుకోండి. అంటే సంభవించిన సంఘటనను p సంభావ్యతతో 
“| రకం సంఘటని ఆనీ 1-p=q సంభావ్యతతో ‘11 రకం సంఘటన'. అని వర్గీక 
రించామనుకోండి. ఉదాహరణకు, కిరాణా స్టారున్సు (పవెశించే కొనుగోలుదార్గ సంఖ్యకు గ 


పొయిజాన్‌ (ప్మకియలు లా 


పరామితితో పాయిజాన్‌ |ప|కియను నమూనాగా తీసికొంచే, పురుషని (పవెశాన్ని p=; 
నంభావ్యతతో 1 రకం నంఘటనగాను, శ్రీ పవేశాన్ని శ నంభావ్యతతో II రకం 
సంఘటనగాను పర్గక రించ వచ్చు. 
(0, € లో సంభవించిన రెండు రకాల నంఘటనల సంఖ్యలను వరసగా 
X40), న) లతో నూచిసే, X=Xx (100 (9) 
£ కా Et 


లక్షణము 3.3.7: XM, t= 0}, (064), €2 0} ల రెండూ వరసగా 
స, గర వపరామితులతొ పాయిజాన్‌ [పక్రియలు. ఇవి రెండు స్వతంత (ప్మకియలు. 


ణిడాదణ * ముందు XD, Xe ల ఉమ్మడి సంభావ్యతను పరిశీలిద్దాము. 


P జ్‌ =n, x చా m) 
Co 


= మ ల గరుడు, వరల ఇళ xX, =i) 


Te 


 P(X,=)) 

J=0 
కాని 194౫ +-మ అయితే, 

x 1) (2) — En 

PX =n, X, m X Jj) 0 


Pp (XD =n, X (2) = మీ) 
ఓ t 
= P CS =n, a = m X =n —f- m). 


xP (X =n +m) 


(0. t లో ౩చఛామయ సంఘటనలు నంభవించాయను కొందాము. మొదటి రెండు రకాల సంఘ 
టనలు వరసగా శ, 1—p సంభావ్యత లతో సంభవి సే, 1 రకానికి సంబంధించి ౨, 
11 రకానికి సంబంధించి Mm సంఘటనలు జరిగే షరతు సంభావ్యత ద్వివద సంభావ్యత. 


న 
p"(1—-p) కు సమానము. కాబట్టి 


0 (Xn =n, x 2 = m) 


చచార నా (Nt 
క p" (1 వ Pp) +. © (n-+-m) | 
(0-0) 
oon! 





\pt)" 
n 
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దీని నుంచి 
య 
pe (Ca 
P(X =n) 5 . P(XDV=n, XK? = m) 
m= 
యం లీ Fags m 
=. e-*Pt (Oot) నై e-Ai1-—PMt Mt A p) | 
n! న m! 
నని e-APt (\pt)" 
1! 
ఇదేవిధంగా, 


P X క్షం) = m) గ్‌ా వ : { ణి (! a p | | సై 
|. m! 
{XD (20), తటి, ౯2౮౦) లు రెండూ వరసగా ౫p, ౫(1 - 9) వరామి 
తులతో పాయిజాన్‌ పక్రియ పై ఉమ్మడి సంభావ్యత, ఉపాంత సంభావ్యతల లబ్దానిక్‌ 
సమానం కాబట్టి శు రెండు పాయిశాన్‌ (ప కియ స్వతంత్ర (స్మక్రియలని చెప్పవచ్చు. 
3.3.6 పాయిజాణ్‌ (న్యకియవ నొధారజోకరణము (generalization): ఈ 
(పకరణంలో పాయిజాన్‌ _ప్మకియ యొక్క రెండు సాధారణీకరణాలను పరిశీలిద్దాము. 


(గీ వె జాతీయ (non-homogeneous పొయిజాన్‌ పక్రియ: 
నా వాన 4 


పాయిజాన్‌ |ప్రక్రియలోని సంఘటనల సంభవరేటు ౫ ను సంభవకాలం t మె 
ఆధారపడునట్టు చేసి మొదటి సాధారణీకరణాన్ని రూపొందిస్తాము. దీనిని వైజాతీయ 
non-homogeneous or non-stationary) పాయిజాన్‌ [పక్రియ అంటారు. 


నిర్చాచనోము 3 3.8 కింది నియమాలననునరించే గణన ప్రక్రియ $౫, (2 0. 
ను “0 త్మీవతా [పమేయంగాగల వై శాతీయ పాయిజాన్‌ పకియ అంటారు, 


(J ఇా0 
ii) {X,, t= 0. స్వతం[త పెరుగుదలలుగల |వ|కియ 


(iii) (t» ఓం At లో ఒక్క సంఘటన నంభవించె సంభావ్యత 


పాయిజాన్‌ [పక్రియ 101 
X(t) At +O(At). ఆంటే, 
PX aA, —-X=1l)=N()AtTO(At) 


(ivy) (ఓఓ కీట లో ఒకటికంటే ఎక్కువ సంఘటనలు జరిగే సంభావ్యత 


O(At). అంచే, 
2 అ టం సం 
12 
dh) దృష్ట్యా 
Lt 1I— P(X టి =x (6 
tis) ot 


t 
పాయిజాన్‌ పకియలో ౫౬ ఒక సిరాంకము ౫, m(t) = గ క్రి ds గా సూచించి, 
థి | 


0 
వె నియమాల ఆధారంగా, 


P(X వు XK =m) =e So ms క 


ఓ చాక (ఓ 


bn Ub మటు టు. స (0 2 0) 


n 


అని నిరూపించవచ్చు. (3.3.22) (ప్రకారం ౫-౫, అనే (8.3.23) యాద్భచ్చిక 
చలరాశి సగటు మ (1 + క) లా మె (ఓ) గా గల పాయిజాన్‌ విభాజనాన్ని అనుసరిసుంది. 
ఇక్కడ 11 (1) ని పక్రియ యొక్క నగటు మూల్య [ప్రమేయము (mean value 
function) అంటారు, పాయిజాన్‌ |ప|క్రియలో ౫ (t) జాసి m (t) = Nt అవుతాయి, 


నీద్దాంతము 3.3.2 లో వలెనే ముందు 5ని స్థిరీకరించి (3.3.23) ను 


(t) = pan = 
Py P (య +8 గ్య n) 


BLP X= 0) 


s+t+At 


102 సామాన్య మారన్‌ ప్రక్రీయలు | 
=Pi{(s,s+t లో 0 సంఘటనలు, (s-+Ft,s+Ft+At లో | 
0 సంఘటనలు నంభవించడం | 





= Pp {(5, Ss -- t లో 0 సంఘటనలు సంభవించడం 


xP {(s +~t,s-+t+At లో 0 సంఘటనలు సంభవించడం . | 


అ pp 1 eK (3 gs tat an 4 (At) ( పై నియమాలు) జై 


ట్‌ ఆ ni O(a - 
చలా హు ఇ ాతి (చాట Pp FT — 


ht 30 అయితే, అవధిలో 


pO mG)" 


( 


లేదా, log Pol a 0, (s-+u) d 


= -- [2340 - ఇ(్రి 
pt చై e-{™ (S+t) - (5) } 
ఇదేవిధంగా ప్రతి 1 ౫0కు (3.3.23) ను నిరూవించండి. వై జాతీయ పాయిజాన్‌ |వ క్రియలో 


ఉన్న (పత్యేకత ఏమంచే, ఒకే పొడవుగల కాలాంతరాలలో సంభవించిన సంఘటనల స సంఖ 
సమంగా ఉండాలనే నియమానికి కట్టుబడి స్థావర సెరుగుదలలుగల పకియ అన్న mere 


చెయనవనరంలేదు. 
(B) సంయు క్ర పొయిజాన్‌ (పకియ ( Compound Poisson Process ) క 


నిర్వచనము 3,392 గ ని కింద విధంగా రూపొందించగలిగి నపుడు 
{X,t2 0} _ష్మక్రియను సంయు క పాయిజాన్‌ [ప[కియ అంటారు. 
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N 
t 
పతి, = ౦0 కు, X= ౫ ర్య 03.98.24 
i=1 
ఇక్కడ i. {Not = 0} పాయిజాన్‌ |షృక్రియ; 
ii. YY, రగ +, లు ఒకె విభాజనాన్ని అనుసరించే స్వతంత 


యాదృచ్చిక చలరానలు. (1%, 2 = 1) కూడా {N,t=0}తో 
స్యతం|త యాదృచ్చిక చలరాశుల అను|క మము. 
ఉదాహరణకు, (2) | = 1 అయితే, & = మ్మో (యు t= 0} మామూలు పొయి 
జాన్‌ |ప|కియ అవుతుంది. 

(0) బస్సులు స్టైాండును పవెశించడం పాయిజాన్‌ |ప్ర[కియా నమూనాను 
అనుసరి సే, పతి బస్సులోని (పయాణీకుల సంఖ్య డె విభాజనాన్ని 
అనుసరించే నస్వతం్యత యాదృచ్చిక చలరాశులు అవుతాయి. ఇక్కడ 
స: 4వ బస్సులోని [పయాణికుల సంఖ్య; 
రి : * సమయానికి స్టాండును [ప్రవేశించిన [ప్రయాణీకుల సంఖ్య 
అయితే, 

{Xt = 0? సంయు క పాయిజాన్‌ |ప|క్రియ అవుతుంది. 

(౯) కొనుగోలుదార్హు సూపరుబజార్‌ వదలి వెళ్ళడం పాయిజాన్‌ _ప్మకియా 

నమూనాను పాటిస్తుందనుకొం దీ, 
Y, * 1వ కొనుగోలుదారు ఖర్చు పెటై మొతము 
త * + సమయానికి అయిన ఖర్పు లేదా కొనుగోలు మొత్తము. 


ఇప్పుడు సంయు క్ర పాయిజాన్‌ [ప్యకియ యొక్క అంక మధ్యమము, వి సృతులను కను 
కో వడాన్ని పరిశీలిద్దాము. 


E(X)=E{E(X, N)} 


కా E(X N=n)=E| 2 న్‌ N,=n} 


= వ. స్‌ Y,} ళ్‌ ౪7లు, N లు స్యతం|తాలు) 
1 
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జగ (1) 
SEA, ఎ జ వ, 
E(X)=E(N).E(Y,) 
= సట, 2 గగ పత 25 
షరతు వి స్పృతి (conditional variance) సూతాన్ని ఉపయోగించి, 
Var. (X)=E{Var. (X, మ) + Var. {E(X, NN). 
n 
కొస) Var, (లప N, = n) = Var, { > గ = n Var. న 
l 
Var. (X N)=N, Var. గ. 
Var. (X,) = E (N,) . Var (Y) + Var. ల E (|) 
త హి. 
= సట Var (Y,) + {E (XY) 
తా వ (1౨) sam. 20 


Y, యొక్క విభాజనం తెలిస్తే, (3.3.25), (3.3.26) ల నుండి. (3.3.24) లోని సంయుక్త 
పాయిజాన్‌ ప్రక్రియ యొక్క. అంక మధ్యమము, వి సృృతులను కనుక్కోవచ్చు. 


లి. 4 శుద్ద జనన (ప్మకియ Pure birth Process) 


పాయిజాన్‌ (పక్రియ పరిశిలించేటప్పుడు, (t, ఓ + ద € అంతరంలో సంఘటన 
నంభవించే నంభావ్యత At +0(At), (0, € అంతరంలో నంభవించే సంఘటనల 
సంఖ్య ల పె ఆధారవడని స్థిరాంకంగా అనుకొన్నాము. కాసి ఈ సంభావ్యత ౬ పె ఆధార 
పడునట్లు చేస్తి పాయిజాన్‌ (ప్మకియను ఒకవై వుగా సాధారణీకరణం చేయడం వల్ల ఏర్పడే 
షుర్‌! సామాన్య మార్కోవ్‌ పకియను ఇప్పుడు పరీశీలిద్దాము. ఉదాహరణకు, బీవాణువుల 
లోని పునరుత్చ త్రికి సంబంధించి ఒక నిర్ణీత సమయాన కొ త బీవాణువు జన్మించే సంభావ్యత 
అప్పటివరకు ఉన్న బీవాల సమూహప్పు పరిమాణంపై అధారపడడం సమంజనమె. 


{A} అనే hs Rags క Ks ee ధనాంకాల యొక్క అనుక మాన్ని 
థి 5 x 2 ఇద అల స్ట a ఇల 
తీసికొండి. కింది స్వీకృతాలను తృప్పివరచే సజాతీయ మార్కోవ్‌ |వ|క్రియ {x} ను శుద్ధ 
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జనన [పక్రియ (pure birth process) గా నిర్యచిసాము. ఇక్కడ (0, న్‌ లో సంభవించిన 
2 సంఘటనలను (జననాలు = births) వేష తో సూచించామనుకోండి, 
(2) | లో ఒకే సంఘటన సంభవించే సంభావ్యత ౫, At +0 (At), 
అంటే * సమయం వరకు నంభవించె జననాల సంఖ్య ల అయితే, 


P Ran ల =, A= n)= us జ ఈ (Ot) 


(by) (htTat లో జననం సంభవించని సంభావ్యత 1- A. At +0 (at) 
6052 (3 se Sl ASTD) mt NAN At PF వ్ర (1). 


& తొలిళో జననాల సంఖ్య సున్న, అంటే య = 0. 


పె నియమాల ననుసరించి కింది నియమాన్ని సరిచూడవ 
వారట రిల, NENG 
(ర) (19 t TAU లో ఒక జనకం కంటె ఎక్కు వ సంఖథవించె సంభావ్యత 0 (At) ' 


అంటె, y= \' 


౦09 


> P Xa అ x, హా n) వ్‌ (య. 
i>! 7250 
పె (2), (b) లను సజాతీయ సంకమ సంభావ్యతలలో వాసే, 


NE, = Pau [7 t + At) = గా ల్ని At +O (St) స్‌ 


p (దిరిలు కై (0 టట కట్న At +O(At). i 
mil 

(8.4.1) లోని నంభావ్యతలు 1 పై ఆధారపడకుండా ఉండడం [గహించవలె, 

p= = P(X = n) అనుకొని, (3.3.2) ఉపయోగించి, (3.3.6), (3 3.7) ల వలె 


pa 


ptttan = pp 1 =. At ఈ (Oty 2.3.4.2 
ట్ట = ps |] ఆ గన్ని At 6 (Ot) 
tp, AtETO(At) +O(At) (1 >0) వట 


(3.3.8), (3.3.9) లను దృష్టిలో పెట్టుకొని, (8.4.2), (3.4.8) లను 


106 సామాన్య మార్క్‌ (ప క్రియేటు 
కింది విధంగా [వాస్తాము, 


py By i టు స్స Pp 34,4 


హూ టా t al, 
pO =A POTN PB) (n>0) టప 
తొలి నియమము py) = 1 ద్యారా (8.4.4) అవక లన సమీకరణాన్ని సాధించి వాస్తే, 


po జ e—-*0t > () 


(పతి ॥ హ~ 0కు, i = 0 అనే తొలి నియమాన్ని ఉపయోగించి (8 4.5) అవకలన 
సమీకరణం యొక్క సాధనము 


h 


ps 2 ప (T) eit (n > 0) లీ. 4,6 
r=0 


(3.46) లో జ 


_ hm, 
(౫ mE గ (గ a గి క్‌ (A. న్‌్‌ గి (A i MN) ప (గా లః N,) 


ఖా 


1 1 + 1 జననాల మధ్యగల వ్యవధిని T, తో సూచిస్తే, 


~=n—|I n అ 
Le YY క య ఈ వె | 
1=0 1౫20 _ 
n—|l 
nవ జననానికి పే నిరీక్షణాకాలము WwW = 1] T.. 
i= (| 


P(T<x)=1—P/{(0, న లో జనాలసంఖ్య = 0} 


me pee = హు న ద స! . 
1 P(X mle 

అంటే; గ యాదృచ్చిక చలరాశి ౫ పరామితిగాగల బుణఘాత విభాజనాన్ని అనునరి 

స్తుంది. పె సీకృతాలు (a )—~ (ec) ల ఆధారంగాను, సిద్దాంతము 3.8.3 దృష్ట్యా, T 

(i = 0) లు వరనగా గ పరామితులు గల బుణఘాత కానా. అనునరించే సరన్పద 

స్వతంత్ర యాదృచ్చిక Go అసి చూడవచ్చు. 
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(3.4.6) లో ౫, స్య, .. ౫, లను తగు విధంగా ఎన్నుకొంటే p 9 = 0, 


00 
కొని ౫ pe య 1 సంభవం కావచ్చు. (పతి (౦ కు సంబంధించి, 
= 0 


(ఫ(9, n=0, 1, 2 ....| |హృక్రియ యొక్క విభాజనము అవడానికి 


0ం యం 
అంటే ౫ p= 1) ౫ ్నA-1=0 (3.4.7) అవశ్యక, పర్యాప్త నియ 
n= 0 n=0 
మం అవుతుంది. 


8.4.1 ల్ర(రీ = యూల్‌ (వ్యయ (Fury - Yule Process) : శుద్ద జనన 
[ప్మకియలో గ్ని బదులు ౧98 (2 = 2 ...) ను వతిమ్నేపిస్తే వచ్చే షకియ పురీ = 
యూల్‌ _ప్మకియ అంటారు. పునరుత్స త్రిలో కొత్త బీవాణువులకు జన్మ (రెండుగా కాని, 
అంతకంటె ఎక్కు_వగాగాని చీలినప్పుడు) నిచ్చే జీవాణువుల సమూహాన్ని పరిశీలించేటప్పుడు 
చః (పత్యేక సందర్భం ఎదురవుతుంది. (ఓ, t ~~ A t లో వేర్వేరుగా జన్మ సివ్యగల 
సంభావ్యత, At + 0(A 1 తో 0 బీవాణువులు ఉంటే, (t,t +A t- లో మరో 
కొత బీవాణువు జన్మించడానికి సంభావ్యత, సంక లన సంభావ్యతా సిద్దాంతము (additive 
law of probability) (ప్రకారం ్నnA4At+70 (ఓ t). జన్మనిచ్చే _బీవాణువులు 
మరణించకుండా పునరుత్స క్తిలో పాల్గొంటాయనుకొందాము. (3.4.7) నియమంలో గ = An 
(n = 1, 2, 92) వాస్తే, 


జ 


1 / | l 
22 N-l= పా కే ల టా టాడా = 0 
నా 1 " A | స్త స J 


కాబట్టి (3.4.5) లో గ = An వాసి, పో == 0 అనే తొలి నియమాన్ని ఉపయోగించి, 
ఆ అవకలన సమీకరణం యొక. సాధనము 


n 
pu = 2 | జ్జ e-*:t (n > 0) 
స 1.2.3. ౨౨౨ మా! 
క =~ ర ర Bt) 





దీని నిరూపణ విషయంలో ఆస క్రికల చదువరులు “Introduction to 
probability and its applications by Feller, w ఏ vol. 1 ను నంపదించండి | 
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యు CY 


టక ల 
= (శా 1 స] 
( మై 
xt ఆ awl Atir=l 
PO=P(X=n)=e-! 2 (Ce) 
=1 శే 
= g-At (1 క i 4.3.4.8 


ఇది p= 6 పరామికిగాగల జ్యామితీయ సంభావ్యత. 
తొలిలోని జీవాణువుల సంఖ్య ॥, అంటే ౫ = 1 అనుకొంటే, 
(3.44, (3.45) ల ప్రకారం, 
మ జ న ంంంఏం4,9 
ల Se) (12-10 స్ట n>0)...8.4.10 
p,(°) = 1, pu = 0 (n SE i) అనే తొలి నియమాలను ఉపయోగించి, 
(3.4.9), (8.4.10) అను సాధిస్తే (ప్రతి ౧ 2 ॥కి, 


in— 1; 


pt = ఠా! (1 క ఇ «3.4.11 
MM ™ . 


(3.4.11) సి (3.4.8) ద్యారా కూడా వాయవచ్చు, తొలిలో నమూహవు .పరిమాణము 
1 అయితే, + సమయానికి దాని పరిమాణము 1 స్వతంత్ర జ్యామితీయ యాదృచ్చిక చలరాశుల 
సంక లనానికి సమానమవుతుంది. సంకలన లక్షణం దృష్ట్యా, | స్వతం్యత జ్యామితీయ 
యాదృచ్చిక చలరాశుల సంకలనము, (8.411) లోని బుణ ద్విపద విభాజనము 
{Negative Binomial ditstribution’ ను అనుసరించే యాదృచ్చిక చలరాశి అవుతుంది. 


పెన చర్చించిన పక్రియ సజాతీయ మార్కోవ్‌ పక్రియ కాబట్టి పతి 
to pp [| పౌ 0; n= మ లకు సంబందించి 


వా (శం t9) = P (ష్య స్త హ్‌ = | హ్‌ = m) 


లై 


శుద్ద మరణ (ప్రక్రియ 109 


లా 1! 
అ ఠా! 1 — e@-At\nm 
bak | ) 
లా Cy (t వ 1 nm ఓ 
Lt నాలి (మజా 1,2... msn) 


tt; య 


దీనినిబట్టి శుద్ధ జనన ప్రక్రియలో స్థితులన్ని సం్యకమ లేదా సంశయ పునారావృత స్థితులు 
అవుతాయి. 


లి,5 శుద్ద మరణ (పక్రియ (Pure death process. | 


కొన్ని భౌతిక దృగ్విషయాలకు సంబంధించిన [వ క్రియలలో పరిశీలనా [ప్రారంభ 
దశి నుంచీ సమూహపు పరిమాణం తగ్గడం (మరణించడం వల్ల గాని, మరో విధంగా గాని) 
సంభవిస్తుంచి. ఉదాహారణకు, కిరణాస్తోరులోని నిల్వ సరుకును పరిశీలి సె, కొంతకాలానికి 
స్టారు కాళీ కావడం ఆ తరవాత తిదిగి సరుకు నిల్వ చేయడం జరుగుతుంది. ఇటువంటి 
సందర్భాలకు శుద్ద మరణ (పక్రియ గణిత నమూనాగా రూపొందుతుంది. 


తొలిలో సమూహపు పరిమాణము (౫ 0) ఆయి, కొంతరేటున తగ్గుతూ 
(అంటే మరణాలు సంభవిస్తూ) ఉంటే, చివరికి శూన్యం అవుతుంది. సమూహపు పరిమాణము 
అయినప్పుడు తగ్గు లేదా మరణరేటు fH, అనుకొందాము. కింది స్వీకృతాలను తృప్తివరచే 
సజాతీయ (ప్మకియన శుద్ధ మరణ (పకియ (pure death process అంటారు. 


(a) (1 t-A౯ లో మరణం సంభవించే సంభావ్యత on At+ 0 At) కు 
సమానము. అంటే, 
P(X న X = శే X=n)=| StTO(At). 


t ళ్‌ 


0) (001 -- Ot లో మరణం సంభవించదనే సంభావ్యత 1 -- 7 [+ 0 (At) కు 
నమానము. అంటే, 
P (X 


ఇతర స 0 X=n=l—-p, At+0(At). 


(8), (b) ల దృష్ట్యా కింది నియమాన్ని సరిచూడవచ్చు. 
(౧ "(ఓ t+ At లో ఒకటి కంటె ఎక్కువ మరణాలు సంభవించే సంభావ్యత 
0 (At) కు సమానము. అంటే, 
2 a LTP X=n)=0 (at 
J>1 


110 మారో గల్‌ శృంఖలాలు 


ఇంకా, (3 t- At లో మరణం సంభవించడం, దీనికి ముందు మరణానికి మధ్య పట్టిన 
వ్యవధి పై ఆధారపడదని అనుకొందాము. 


(2), (0) లను వరసగా నజాతీయ సం|క్రమ సంభావ్యతలలో (వాస్తే, 


0 (దీవి జూ Pry (tot -- At) శ (+ 0 (At, ~ 


nmn-1 


p Bmp (tt+Aty=1-p At+O (At) " 


nn 


నఖ. 


(3.5.1) లోని సంభావ్యతలు ఓపె ఆధారపడకుండా . ఉండడం [గహించవలె. (0, ళ్‌, 
t,t + At లలో సంభవించిన మార్పులను దృష్టిలో పెట్టుకొని, (3. 3.2) ఉపయోగించి, 
కింది సమీకరణాలను వాయవచ్చు : 


(ran = p; (1 =! At) 0 (Ot) ఏ ఏలి 
pero = pr (1 = i, Lt) 


Ns At, ba . 0 (౧౬ (2 య్య i) 23.5.3 


(3.5.2), (8.5.8. ల నుండి 


ఇ 


I(t) — — (t) 
0; uP, .+:3..4 


tt) — Ct t) wo 
p= టమ చా ల Py (n<i) 2.8.55 


[పత్యెకించి, [= nA అయి నప్పుడు, చె అవకలన సమీకరణాల సాధనం కింది 
రూపంతో ఉంటుంది, 
( 
ల. =. gah (1 లా A (n= 1) wus ర రోప్‌ 
|S n 
(3.5 6] ను  p = 6-గీ వరామితులుగాగల ద్విపద విభాజనమని గుర్తించండి. (8.5.8) 
నంభావ్యతలతో (౫, ఓ = 0} ద్విపద ప్రక్రియ అవుతుంది. 
పారంభ దశలో ఉన్న సమూహంలో యూనిట్లను బెర్నోలీ పయత్నాల అను 
[క వాన్ని (ప్రవేశ పెపేవిగా తలంచి కూడా t క్షణం వద్ద సమూహ పరిమాణము న యొక్క 
విభాజనాన్ని కనుక్కోవచ్చు. [ప్రారంభ దశలోని సమూహపు యూనిట్ల జీవితకాల (116 
. ] 
time) విభాజనము బుణఘాత విభాజనం, దాని అంక మధ్యమము ---- అనుకొందాము + 
i 


క్షణంవద్ద ఉన్న n యూనిట్లలో ను (వతిదానికి సంబంధించి (1, గదీ టో అది మరణించే 


జనన మరణ [ప[కియ [11 


నంభావ్యత | At + O(At) అవుతుంది. ఈ మరణాలు ఒకదానితో మరొకటి [ప్రమయం 
లేకుండా సంభ విసాయని అనుకొంటూ, (ఓ t -- At లో సంభవించే మరణాల ఏభాజనాన్ని 
కింది విధంగా (వాయవచ్చు : 
P | (t, t+AF లో ఏది మరణించదు! = 1—uAt + 0 (Atyn 
=1—-npAt+o(At తి! 
P { (ఓ t+ At లో ఒకటి మ్మాతమే మరణించడం. 


= (gp At +O (At) (1—p At +0 (లాం! 
= np దీ! + 0 (AN ...3.5.8 


P { (t, t + At లో J (> 1) మరణాలు సంభవించడం. 


=. RAT OAC 1-4 At + Am 


జీ 


= 0 (At) 359 


(3.5.7) — (3.5.9) లను నిశితంగా పరిశీలిస్తే, ఇవి శుద్ధమరణ పక్రియ నమూనాకు 
సంబంధించిన స్వికృతాల అర్ధాన్ని ఇసాయి. యూనిట్‌ లేదా సభ్యుని ఉవితకాలంయొక్క_ 
విభాజనము బుణఘాత వఐభాజనమనుకొన్నాము. అందువల బెర్నోలీ [ప్యకియలో 1 క్షణానికి 
ముందే మరణం నంభవించె సంభావ్యత p= ef, సభ్యుని జీవితకాలం €ని మించదనే 
సంభావ్యత 1 -- 6-“ తో వకీభవిస్తుంది. కాబట్టి ₹ క్షణానికి మరణం సంభవించని 
సంభావ్యత 6=1- p= 6, 


గ్‌ (4 = Pp (వష = n) = 6-౧ (1 gre 
E(X)=ie! (n <i) 
Var. (X = i e-Mt (1 యా e-»t) Wis 


లీ.6 జనన, మరణ (ప[కియ (Birth and death process ) న 


పే ప్రకరణాలలో పరిశీలించిన శుద్ధ జనన (ప్రక్రియ నమూనాలో కేవలం జననాల 


మూలంగా నమూహవరిమాణం పెరిగిందనీ, శుద్ధ మరణ [ప్రక్రియ నమూనాలో కేవలం 
మరణాల మూలంగా సమూహ పరిమాణం తగ్గిందని అనుకొన్నాము. ఈ రెండు నమూన్గాలన్ను 


112 సామాన్య మారో్కూవ్‌ (పక్రియలు 


సమ్మి[శమంచే స్తే, సమూహంలో పెరుగు, తగుదలలవల్ల ఉత్పన్నమైన మార్పులను. గురించి 
ఒ'కెసారి పరిశీలించ వచ్చు. ఉదాహరణకు, బిపకొసరత స్టోరులో (పవెశించిన వారు కొందరయితే, 
సేవలనందుకొన్న మరికొందరు స్టోరునుండి న్మిష్కమించెదరు. ఇదేవిధంగా టెలిఫోన్‌ 
ఎక్స్‌చ్చేంజి వద్ద నమోదయిన విలుపులు, అంటువ్యాది వ్యా ప్తీవంటి మి|శమ నమూనాను 
జనన్క మరణ |వ|క్రియ (birth and death process) అంటారు. ముందు ఆతి 'సార్య| తిక 
జనన, మరణ |పకియి (generalized birth and death process) గురించి 
చర్చి సాము. 


కింది స్వీకృతాలకు అనుగుణంగా రెండు రకాల సంఘటనలు సంభవిసాయని 
ఊహిద్దాము. “జననము అనె మొదటిరకం సంఘటన ద్వారా సమూహంలో ఒక యూనిటు 
మరకు పెరుగుదలని; “మరణము అనే రెండో రకం సంఘటన దారా సమూహంలో ఒక 
యూనిటుమేరకు తగ్గుదల ఎర్పడిందని ఆనుకొందాము, 


(1) t క్షణం వద్ద సమూహ పరిమాణము 1 (120) అయితే, (t,t + న. 
అన ఆత్యల్బ కాలాంతరంలో ఒక) జననం సంభవించే సంభావ్యత 
Un (చా 0 (ద t) కునూ: కనీసం ఒక), జననం గూడా సంభ వించ ని 
సంభావ్యత 1-- గీ 9 (ఓ t) కునూ, అంటే ఒకటికంటె పెచ్చు 
జననాలు సంభవించే సంభాప్యత 0 (41) కునూ, నమానము. (+ t+At లో 
సంభవించే జననాలు, వీటి ముందు జననానికి మధ్యపట్టే వ్యవధివై ఆధార 
పడదు. 


(11) 1 కణంవద్ద సమూహ పరిమాణము 1 (౮ 0) అయితే, (3 t +At అనే 

అతల్స కాగా ఓక మరణం సంభవింబె సంభావ్యత MH, At ఆ 

0౮(6౬ t) కునూ, కనిసం ఒక_ మరణంకూడా సంభవించని సంభావ్యత 

1 — pA 6-0 (ఓ 6) కునూ; ఆంటే, ఒకటికంటె ఎక్కువ మరణాలు 

సంభవించే సంభావ్యత 0 (ఓ t) కనూ సమానము. (t, t+ A t లో 

సంభవించే మరణాలు, వీటి ముందు సంభవించిన మరణానికి మధ్య పట్టే 
వ్యవధిపె ఆధారపడవు. 


(111) 1 క్షణంవద్ద సమూహ పరిమాణం 0 ఆయితే, మరోక్షణంలో అంటే, 
(t, t —- At అనే hc మరణం సంబవిందు సంభావ్యత 
o(Ct). 

(iv) జనన, మరణాలు ఏ సంబంధం లేకుండా సంభవిసాయి. | క్షణంవద్చ నమూహ 
సరిమాణము X త్రో సూచిస్తూ, 


Pin (St) = P(X=n X=i) (t>s) వర] 


“3 


పె సీంక్ళ తాల దృష్ట్యా {x t—0 | స్థావర, స్వతం్యత 'సఉజరుగుదలలుగ ల మార్కొవ్‌ 


జనన మరణ (పక్రియ. 113 


(ప్ర కియ అవుతుంది. (3.6.1) [ప్రకారం 


(t) = మా డా (0) (t) — t 
Pr = టై న్‌ n) 2 క) Pin న Pin 
J 


cy) 


"ఇక్కడ = 1, j 2 ప్రకారం 29 = 1,0) 


వె - స్వీకృతొల పర్యవసా నరగా సజాతీయ సంక సంభావ్యతలను కింది విధంగా 
[వాయవచ్చు. లగ 


Prana = Pant! (ఓ €+ 06 t) మ కా ల్‌ు O [1 t _ 
' AN AtLTO (At) 
Pri =P (40 A) 1-H AtTO(At) 
i, BETO (At). 
p (దట =p (ttTAt=I1-NAtTO(At- 


nn 


IE AtTO(At. 


ఏటి దృష్టా, 
న ల Tn 
న్‌ భన న పో 36.3 
క. =u, Brod) Fr 
న్‌ త న. 


లు స్వీకృతాలలో ఉపయోగించిన త్న [లు వరన జనన, మరణ రేటులు. ఈ సీంకృతా 
లను అనుసరించే సంఘటనలకు సంబంధించిన ప క్రియను 'సార్వ్యతిక జనన, మరణ 
(వ[కియి అంటారు. వై నమూనాలో: (౫ = ౫ (n= 0) ల = (a> 0) అను 
పతికేపిస్తే ఉత్పన్నమయ్యే (ప్రక్రియ జనన, మరణ పక్రియలకు అత్యంత సామాన్య 
వదాహరణ. అవుతుంది. ఆందువల్ద ఈ సందర్భంలో పై నమూనాను “సామాన్య జనన, 
మరణ (ప్మకియ (5$1%)016 birth and death process) అంటారు. -(పస్నుతం సార్వతిక 
జనన మరణ |ప|క్రియ నమూనాను విశ్లేషిద్దాము. 


ly 


౫, యొక్క. విభాజనాన్ని కనుక్కోడాన్నికి చాప్‌మెన్‌ - కొల్మా(గ్రోవ్‌ సమీకరణము 


114 సామాన్య మారో్కవ్‌ (ప క్రియలు 


(8.2.1) ను ఉపయోగిస్తాము. పె స్వికృుతాలకు అనువుగా (0; Et; (t,t + At) అనే 
వర్ణిత కాలాంతరాలలో నంభవించే సంఘటనలకు సంబంధించిన సంభావ్యతల (3.6.3) ను 
(3.2.1) లో పతిషవిస్తే, 


(CEAT) (స) (At) (£) ( At) (t) (At 
క Pr Pas T as tu n u P+ య 


స్టన్‌. లీ త కరక 
Jzssn—ln,n-+1 

(3.6.3) ను (3.6.4) లో (పతిక్షేపిస్తే 
ర్న దరి = p 1 - (A Fp )At+O (At) 
TD NM, AtTO (At) 
TP pL |AtTO (Ot) FO(At ...8ి,6.5 


Nts 0 అయితే, అవదిలో 


(tL At) లై ఓ 
Lt mS Ch కా DLE o(At) = 0 
n 
At—-0 బై! ఉత, At 
కాబట్టి ఆపదిలో (3.6.3) 
pp — MN py - MP) ఠి 3.6.6 


I(t) — ఒం +. £ 
Pr | (A. Fp) pA జా NN, p (0 


ర్య ఆలా 


TAP (a ౮) తభ సార! 


అవుతుంది. ఈ అవకలన సమీకరణాలకు సంబంధించిన తొలి నియమాలు 


( 1, n=ji 
0s ni 


As ల్‌ లు ౧లో ఎదైనా [ప్రమయాలయినప్పుడు (3.6.7) ను పరిష్కరించడం అత్యంత 
క్స్‌ సమస్య అవుతుంది. కాని. నమూనా, తీ వతలు గి, Msn లో ఏకఘాతీయాలయితే, 
అంటే A, = nn}, తా ny అయి తొలిలో సమూహ పరిమాణము = 1 ఆయితే, 


1— e-(A~H) t 


n (t}=— . వ 
P లీ A — ఉతకాలి] t 1°.9,0.8 


జనన మరణ (పక్రియ ల 115 
p=(1—a)(1—b)brt ...3.6.9 


vs Fe 5 = స [ న్‌ 
ఇక్కడ 5 = ళు (3.6.9) నుంచి (౫, t= 0 యొక్క విభాజనము సవరిత 


జ్యామితీయ విభాజ నము (modified geometric distribution) అని గహించ వలె. 


పెరుగుదల రేటు గి? 1 మీద ఏకఘాతీయంగా ఆధారపడి ఉంటే, సమూహం 
ఎప్పటిక్తై న నాశ నమయ్యే అవకాశాన్ని P, (1) ద్యారా వరిశీలించవచ్చు. చాయ అయి 
నప్పుడు, అవధిలో p్రై "(9 కీసికొనే Ma బట్టి ఇది ఆధారపడి ఉంటుంది. ఇక్కడ 


Lt pas = సమూహము అంతంలో నశించే సంభావ్యత 


చాయి 
స్మ 
కాబట్టి, =f గా వాసి, (3.6.8) నుండి, 
ని క న్‌ 
గల 
tL a=, (>I 3.6.10 
Fr (b>) ae 
(౨౦౦ 
ఆ(0-*) ఉా([ నానా 
Lt a= Lt లా 
t 6-1) 116 (00 ) 
t—3 0 t_-_-0c0.. EE; 
= 1, (మ 1) «3.011 
కే Pal RE 
అంటే, Lt p=’ 36 12 
(౨౦౦ క Pp, ౧11 


దీనినిబట్టి మరణరేట్సు [13 జననరేటు ౫ కంటె ఎక్కువ ఉంటి సమూహము చివరి 
నాశనమవడం తథ్యమన్న మాట. 


es సాధారణ జనన్క మరణ [పక్రియ యొక ,_ అవధి సంభావ్యత లు 
Lt Pp d= Lt P,/=nmn ను కనుకొ_ందాము ( (3. 6, 6). (3. 6 7) లలో 
క్ష! య a 1n TN | [ 


t— 4+—ాు 


Lt p= గా, Lt pr = 0 (n = 0) 


(౨౦౦ [ర 


లను (పతిష్నేవిస్తె, 


116. సామాన్య మారో్కూవ్‌ (ప్మకియలు 





0న టీ! గ 3,613 
=— (A, TH, ట్ర న స TU n>0) 
3.0.14 
(3.6.13) నుండి, 
గ, = Ay షై 436.15 
(1 
గ 222 1 అయినప్పుడు. 3.6.15) నుంచి. 
T= TEA), 
ENT శ (ల 8 6.15)) 
A.A 
కా 0 సై. 36,106 
Pilg 
ఈ విధంగా గణితానుగమనం దృష్ట్యా వాదిస్తే, 
త Ces Tonds గా 43.6. 17 
స్త HM} బ్య Mr 
00 
(3-6. 15 —(3. 6. 17) లను నై గ =1 లో rae గ ని కనుక్కొంటి, 
0 
క్ట న ఆలు ఆం! 
ప. 1+ s సహన lek | .+:3.6.18 
తా fafa hn 
న (౫0. యొక్క అవధి విభాజనము (గ్య =0112,.. ను (3.617, 


3 | 18) ల ద్యారా నిర్ణయి సాము, ఇక్కడ మనం గమనించవలసింది సమంకే గా. 
అహన్య సాధనం కావలెనం చే, (8.6.18) నుండి — 


క్‌ ఇ 
Lt: >, bo Te tas An <0 + వె. రం19 
n=l జ ఇ. 





జనన మరణ |ప|క్రీయ {17 


(3.6.19) నియమాన్ని సామాన్య జనన, మరణ (ష్మకియకోసం సరిచూపుదాము. (శీ.6.19)లో 
వం. (1 పా 0), ల పెటీ (n > 0) [వతిశేపి సే 
nm 


CO yon x 
1+ > — యయ లాయ కః 
కట్‌ sie షై 


ఆంది P = న్‌ << 1 అనుకొంటే [గాం ఒక అహన్య సాధన మవుతుంది. 


Lu 


౧ = _ <1 అనుకొని, (3.6.19), (3.6.17) ల నుంచి వరసగా 
య్‌ 


క 0౦ ; 7 షం ప =. 
జో — 1 + bE వారా కాం వా l షష 4 ,3.6,20 
n=1 . (1 గ 
*n 
T= a RE , (03 1,2,4 వత ఇర. 
5 [2 (4 [ 


(| | క 
సామాన్య జనన, మరణ పకియ యొక్క అవధి విభాజనము p = 1 - 


వరామితిగాగల జ్యామితీయ విభాజనమని (8.6.21) ద్యారా గమనించండి. 


స్వ = విస, (ల = మట (12 1) అయినప్పుడు జనన, మరణ ప్రక్రియ 


క! 
లోని పరామితులు ౨ లో ఏకఘాతీయం అని ఊహిొ సాము, రః సందర్భంలో నమూహ 
పరిమాణము య యొక్క ఆఅవది విభాజనాన్ని నిర్ణయించ డాన్ని పరిశీలిద్దాము. 


గ 
0 ==___ య1 ఆయితే? ఆకే 7౫ =0 (2౮౮) 
fp 0 వ 
గి 
0 == పా 1 అయితె, (3.6.8) నుంచి 
H 


nm = Lt హా Lit b= Lt Pa = 


(౨౦0౧౨ (౧-౨౦ 10 


(3.6.9) నుంచి, 


118 సామాన్య మారో్యన్‌ |ప్ర|కీయలు 


n= Lt. pes = Lt (1 —-జ) (d= Lb) bl = 0 
tt 0 - Us 00 
(n > 0) 
(1, P<l 1 
se Moma | 
Ms Pal _ 316.22 
| 


(3.6.22) బట్టి గ మ 1 అయినప్పుడు సమూహం పూర్తిగా నాశనమవుతుందని, 8౨] 
అయనప్పుడు సమూహ పరిమాణము హద్దు లేకుండా పెరగడం సంభవనువుతుందని 
గమనించవల, 


_ లీ,6.7 నిరీక్షణా కాల విఖాజనయు: సార్వత్రిక జనన, మరణ |ప|క్రియకు 
సంబంధించి 1 ॥ + 1 లకు సంక మించ క ముందు 1వ స్టితిలోన [ష్మకియ నిరీక్షించే కాలము 
T, తో సూచిస్తే, 1, అవిచ్చిన్న యాదృచ్చిక చలరాశి అవుతుంది. పై స్వీకృతాలకు అను 
గుణంగా గి? Pn అను జనన, మరణ రెట్టను నూచించే పరామితులని అనుకొందాము, 
పతి n= 0కు, 

L 
ja (0) P(T > t) ఖా రల 


గా సూచించి అత్యల్పవిలువ గ€కు సంబంధించి, T మశ చా గ్‌ ౪౯ అనే ఘటనను 
పరిశీలిస్తే, ్క ల క క్ల 
J | 
wT tN (tbt+At లో కూడా సంఘటన సంభవించదు" 


సాధారణ జనన, మరణ (వకియలోని స్వ్యీకృతాలద్భ షా 


FE (CFOYE ప్రియం (+a) Arto) 


న్నా 


F(t FANE (W o(At 
కం ళ్‌! మ్‌ న్‌ (A తో Fn) షో (ఓ) స వా 
లీ ._౨ 0౦ అయితే, అవధిలో లభించే అవకలన సమీకరణము 
Fr (t)=—(Nt)F (t) 3.624 


F(0)=Pr(T1>0)=I అన తొలి నియమాన్ని ఉపయోగించి, (3.6.24) యొక్క 


జననీ మరణ (ప[క్రీయకు కోన్ని ఉదాహరణలు 119 
సాధనము, 


Pp (గ > t) చా F (t) _ ప (స a a) t 


(620) 436,205 
(3.6.25) బట్టి T,, బుణఘాత విభాజనాన్ని అనుసరించే. యాదృచ్చిక చలరాశి, 
E (T ) = (A. a PH, | i= 0 అయినప్పుడు పె విధంగా 1 కూడా Ns 
అంక మధ్య *మంగాగల బుణఘాత విభాజనాన్ని కం లా! అ 


ఇంకా, + క్షణంవద్ద వ్మకియ ॥ (మా 1) వ స్థితిలో ఉంచే (6 t+ At లో 
n_3n+ 1కు సంభావ్యత A, At + O(At) కునూ, జయము. క సు సంధావ్యళ 
గ్‌ ఊఉ - ఈ (Lt) కునూ, "నీదో ఒక సం|కమానికి సంభావ్యత (౫ శ Fu )At 
+0(/4t)కు సమానమని స్వీకృతాల దృష్ట్యా గమనించాము. ఏదో ఒకమార్పు సంభవించిన 
దనితెలిసే, ఆది ఎ n--|1 అయ్యే సంభావ్యత ౫ (A వ్ర ట్ర కునూ, 1-౨౫-1 
చెందే సంభావ్యత ళల (A. Es (1 కునూ సమానమని చూపవచ్చు. ఈ విధమైన 
[పక్రియాచలనం మొదటి అధ్యాయంలో చర్చించిన 'యాదృచ్చిక నడక*ను పోలింది. 
భేదమేమంటి, ఈ _ప్మక్రియలోని మార్పులు నిర్షీత సమయాలవద్ద కాకుండా యాదృచ్చిక 
క్షణాలపద్దనే సంభవిసాయి. దీనినీబట్టి స్థితిమార్చు సంభవించడాన్ని బెర్నో ఫ్రీ పయత్నంతో 
పోల్చవచ్చు. జనన, మరణ పక్రియను సమూహ పరిమాణం శూన్యం కాకుండా ఉన్నంత 
కాలం బుణఘాత విభాజనాన్ని అనుసరించే యాదృచ్చిక ఆంతరాల వ్యవధులలో జరిపే 
బెర్నోలీ పయత్నాల అనుక మంగా తలంచవచ్చు. ఈ లక్షణం ఆధారంగా జనన, మరణ 
పృక్రియయొక)_ పరామితుల అంచనాలను (estimates) కట్టడం, వాటిగురించిన స 
పరీక్షలను. (hypothesis testing) జరపడం సాధ్యమవుతుంది. 


త్‌. జనన, మరణ [ప్రక్రియకు ఉవాచ . 
జనన, మరణ [(ప్మకియకు సంబంధించిన  పరామితులు గం ర్‌ ట్రో కది 


/ 


మార్పులు చేసి మనం ఎదుర్కొన ఎన్నో సమస్యలకు ఈ (ప|కియను , నమూనాగా [వ్రాయ 
వచ్చుననే విషయము కింది అనువ ర్రనాల ద్వారా తెలుస్తుంది. 


లో.7.2 ఎవలనతో వకథూలత వృద్ధి (Linear growth with immigration) 
నమూనా : సాధారణ జనన, మరణ పకియలో MN త స + 9 (గ పా౦, [౫ 0, 
6 > 0), టల్‌ వెట్‌ (౫ 1, (0 0) లను (పతిష్నేవిస్తే ఏర్పడే నమూనాను “వలసి 
తో ఏకమాత వృద్ధి నమూనా అంటారు. ఇటువంటి [ప|క్రియలు మనకు సామాన్యంగా జీవ 
శాస్త్రంలో పునరోత్పత్తి, జనాభివృద్ధి పరికీలనలలో ఎదురవుతాయి. వ ర్రమానకాలంలో 
సమూహ పరిమాణము ౧ అయి, ఇందులోని [పతి యూనిట్‌ ౫ రేటు [పకారం జననాన్ని 
ఇవ్వగ లగ డం వల్ర సమూహపు పెరుగుదల 6 రేటు |పకారం వృద్ధి చెందడంతో మొతం అరుగు 
దల 1౫ + 6 అవుతుంది. మరణరెటు | అనుకొంటే, సమూహ పరిమాణం టె nu 


120 = =. సొమాన్య మారోవ్‌ (ప్రక్రియలు 


రేటు ప్రకారం తగ్గుతుంది. ఈ సందర్భంలో నమూనాకు ఆకాన్య అవధి విభాజనం ౫} 
ఉండవలనం టే (3.6.19) నిజమని చూపవలె. hrs My విలువలను పతికేపిస్తు, 


దీని అభిసరణం కోస3 నిష్పతి పరీక్ష (12110 1650) ద్వారా పరీక్షిస్తై 


8 (6 +N) .. “(06 గ4౨|౧), వ! ఈతే 


ఓ నారా నా న సనా స 
1౦0 (n Fl)! pT! 0 (8+)... (842 = 1 \) 
గే 

జా 0 (nF 1)/ స. 


అయినప్పుడు ఎకఘాత వృద్ది (ప కియకు ఆకూన్య అవధి విభానము ఉంటుందని స్పష్ట 
మవుతుంది. | . 


ల.7 .2. తం (Queue) నమూనా ఏ ఏదో రకమైన శీవలనందడానికి కొను 
గొలుదార్జు ఓక నిర్ణిత (పదెశాన్ని (పవేశించి వరస [కమంలో . సిరిక్షించడం చూస్తూ 
ఉంటాము. ఈ వరననే “దూ అంటాము. విచారణ కౌంటరు వద్ద విచారణ ఆఫీసరుతో 
సం|పదింపు కోనం వరన [కమంలో నిరిక్షించడం, మెకానిక్‌ షాపు వద్ద మోటారు. బండ్లు 
మరమ్మత్తు ఆనే సేవ కోసం ఉండడ-: బ్యాంక కాష్‌ కౌంటరు దగ్గర వరన క్రమంలో 
డబ్బు పుచ్చుకోవడం లేదా ఇవ్వడం కోసం ఉండడం వంటివి కూ్య్యూలకు pO న SEE, 
క్యూ సాధారణంగా కింది లక్షణాలతో పవ రించడం గమనిసాము 


(1) (వవోల బిధౌనయు + క్య్యూను ఎయే వ్యవధులలో కష్టమర్ల్హు ial ప్రాక్‌ 
అంతర (ప్రవేశ ప్యవధులు (inter-arrival times) తలు. ty, ts fy 
క్షణాల వద్ద వరసగా క ష్టమర్దు క్యూని (వవెశినూంటె, T, wt కా i 
(i= 1,2, 22) లు అంతర |పవేళ వ్యవధులు peu TY, లు ఒకే 
విభాజనాన్ని ఆనుసరించె స్య్వతం|త యాదృచ్చిక చలరాశులు అనుకొందాము. 
అంటే పవేశించే పిధావం కాలం దృష్ట్యా నె న తునన అర్థము. కానీ ఆచర 
ణలో ఇది పూరిగా సమంజసం కాదు. ఎందు వల్చసంటే, ఇలిఫోన్‌ ఎక్స్‌ చ్చెంజ్‌ 
వద్ద వతి, డి సమయాలలో ఎక్కువ పిలుపు నమోదు రావ వచ్చు; రోగులు కొన్ని 
నమయాలలోనే డాక్టర్ల దగ్గరకు ఎక్కువగా చేరవచ్చు. 


(2) సెవా వద్ధతి, విఖాజనము : ఒక్కొక్క కష్టమరుకు సేవ చేయడానికి సేవకునకు 
@ ర 


జనన మరణ హ్రీయకు కోన్నిఉదా హర ణలు 121 
పచ్చి 'సేవాకాలాలు, వాటి విభాజనాలు, 


(3) సేవకుల నంఖ్యం + కాలో నక్రీశిస్తక్న కష్టమర్లకు సేవ చేసే సేవకుల స సంఖ్య, 
5 (5 న. 


(4) టా (వవోర్త్‌న * కష్టమర్దను సేవకు తీనికొనేటప్పుడు సేవకుడు అవలంభించే 
_ విధానముాముందు వస్తే మొదట నేవ; తుది రాకకు మొదట సేవ; సేవకోసం 
షన వసుక లేదా" ప్రత్యేక సమతను ముందు సేవ. 


(5) , క్యా పొడవ కార పరిమితిగలదిగానే ఉండవలె రా లేదా అపరిమిత మైనదిగా 
ఉండవచ్చునా. నన్న విషయము. . క్యూని (ప్రవేశించే వివిధ కష్టమర్దు (ప్రవేశాల 
మధ్య గల అంతర _పవేశ వ్యవధులు (interarrival times), పీరు సేవలందు 
కోడానికి పీ సెవా కాలాలు (service times) కొన్ని సంభావ్యత చట్లాలను 
అనుగుణ్యంగా ఉండే -యాదృచ్చిక' చలరాశులని తను. "| 
ల లక్షణాలుగల కూని సంకేత రూపంలో కింది క్రమంలో వర్ణించడం పరిపాటి, 


అంతర (పవెశ విభాజనము సెవాకాల విభాజనము చెల 
ఆ చరణలో ఉన్న కన్ని వమాణ సంకేతాలు: 


G: పంట్‌ అంతర పవేశ వ్యవధులుగాని అనునరించే ఏదై నా 
యాదృచ్చిక విభాజనము 


M: [ప్రవేశాలు (arrivals) అ అనుసరించే పాయిజాన్‌ లెదా అంతర పవేళ వ్యవధులు 
అనుసరించే ఘాత విభాజనము; లేదా నేవాకాలాలు అనుసరించే ఘాత 
విభాజనము. 


E : అంతర పవేశాలు లేదా సేవాకాలాలు అనుసరించే [_ఆర్హరుగల ఎర్హాంగు 
(Erlang) విభాజనము; దీని సాం దతా [వ్రషముయము 
తీ Et a 
— (Nt te", N>0t>0. 
k! 


D: అంతర (పవశాలు లేదా సేవాకోలాలు స్థిరాలు. 


ఉదాహరణకు, పవేశకాలాలు పాయిజాన్‌ (ప్మకియ రూపంలో, చ్చేవాకాలాలు ఘాత విభాజ 
నాన్ని అనుసరిస్తూ: $ సేవకులుగల “కూని MM క త్రో సంకేత పరుసాము. ఈ 
నాలా M M |, M D కే, M G 1 మొదలై'న 'క్యూ తు వర్గించండి. 


t కారానికి క్యూలో ఉన్న కష్టమర్హ సంఖ్య, అంటి క్యూ పొడవును X తో 
స్తే (ర్చి t= 0} అనేది అవిచ్చిన్న వరామితి తో, విచ్చిన్న స్థితి ఆవరణగల 


{22 


సామాన్య మార్కోవ్‌ (ప [క్రీయలు 


(పక్రియ. దీనినే “క్యూ (సకియి (౧౧౦౪౫౦18 process) అంటారు. కింద బఎర్కొంన్న 
స్వికృతాలను పాటించే చాలా “క్యూ లకు 36లో చర్చించిన సొర్వ తిక. జనన, మరణ 
[ప కియను నమూనాగా వాడి కూ్యూలను వర్థించ వచ్చు. 


1. ([వవౌళాలు : t కణానికి కూళలో ఉన్న కష్టమర్హ సంఖ్య 1 అయితే, . మరో 


, క్షణంలో, అం టె (ఓ, Cyt “అనే అత్యల్పాంతరంలో కష్టమరు కూని 


(వవేశించె సంభావ్యత గట ₹+ 0 (4 t)కునూ, ఎవ్వరు “క్యూ'ని వ్రవేశించని 
సంభావ్యత 1— A At+0 (At) కునూ, ఒకరికంటె. ఎక్కువ కష్టమర్లు 


“క్యూని (ప్రవేశించే సంభావ్యత 0౦ '్నAt) కు సమానము. (61+ A ౯ లో 


గ కష్టమర్హ [పవేళాలు, వీటి ముందు _పవెశానికి మధ్య పర్లి వ్యవధి పై ఆధారపడవని 


అనుకొందాము. 


సేవలు: 1 క్షణానికి క్యూలో ఉన్న కష్టమర్హ సంఖ్య ॥ ఆయితే, (ఓ t+ A €లో 


ఒకరిసేవ పూర్తి ఆయే సంభావ్యత [1 ఈ At) కునూ; ఒకరికి 
కూడా నేవ పూర్తికాని సంభావ్యత 1 - 1, A t+ 0(ర6€ కునూ, ఒకరి 


కంచే ఎక్కువ కష్టమర్హ సవ హారి అయ్య సంభావ్యత శ (6. (కు, సమానము, 
t, tH Nt లోసే వలు ల ఈ సేవల ఆరంభకాలం పై ఆధార 
పడదని అనుకొందాము, 


1. = 0, NM 0 


పై సీ స్వీకృతాలను పాటించె “క్యూ పక్రియ ను Ns PF, PR సతత క్యూ 
[ప[కియ (General Queueing Process) is ఇది సార్శ| తిక జనన, మరణ 
[పకియతో ఏకిభవించ డాన్ని గమనిసాము. 1 క్షణానికి గల క పొడ వును X తో 


సూచిసే, 


Ge 


పె స్వీకృతాల దృష్ట్యా {X, t= 0} స్థావర. స్వతంత్ర పతన గల 


పకియ అవుతుంది. కాబట్టి (3.6. 2) లో వలె, 


వ అనం అట అత సం. ఆ న. 


అసి (వాద్దాము. (3.6.6), (3.6.7) సమికరణాల నుంచి, 


py చా FW pO ఆవ. 12) 
AY, Se; 
Pn క 7 Mn) Pa క గో కా 
క Pr, ' (n>0 ...3.7.3 


ఏటి సాధన నా కోసం ఉపయోగించే తొలి నియమాలు 
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“1, n=i 


=. 37. 
cre 3 0 n7i శ 


a ణ్‌ 


(3 6.19) ఆధారంగా ₹ ఈ అ అయినప్పుడు (6) యొక్క అహన్య అవధి విభాజనము 
[గాః n=.0, 1, 2, లల] ఉండడానికి 


యి 
14+ 5 టక టాం. య యి అ 
n= | Hy తం. 


నిజం కొవాలని తీర్మానిసాము. Lt నా! = కాబట్టి Lt-. pa = 0 ఉపయో 


చాలు t—ా ౦00 


గించి, (3 7.2), (8.7.3) ల నుంచి, 


0 


No హ్‌ గ స్ట పన స 
My L,) nN =A | Fira ni వ. 
ల ॥ నే ప ఖ్‌ 
వై n=l ...3.7.8 
n= 0 
(3.6.17), (8.6.18) ల-వలె (8.1.6) — (3.7.8) లను సాధిస్తే, ౨ ఇ 
ఆ ర అ 
గ = = 5 Waris Bs a 4.3.7.9 
= n= | Ena Pre యు 
n= orate 810 


" M1 Fg *"* Py 
పే సార్యతిక క్యూ (ప్రక్రియలో .2 మీద పరామితులు ౫, శి లకు గల విభిన్న ఆధార 


సంబంధాలను ఊహించుకొని వివిధ క్యూలను (పసుతం చర్చిద్దాము. 


వ్యా వేళ M 1: కష్టమర్దు ౫ పరామితితో పాయిజాన్‌ [ప్రక్రియ నమూనాలో 
వవేశించే ఏర్పాటును పరిశీలిద్దాము. సేవకునికి ప 
ఘాత విభాజనాన్ని ఆనుసరించే స్వతం[త యాదృచ్చిక చలరాశులు అనుకొందాము. 


కే సేవాకాలాలు క"! ఆంకమధ్యమంగాగ ల 
యి 
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క్షణానికి క్యూ పొడవు ౫, అయితే, (న t => 0) అనేది (పతి ॥కు ౫, = ౫, 
[, = గ వరామితులుగాగల సార్వత్రిక క్యూ పక్రియ అవుతుంది pp =P(X=1 
అయితే ర ని సాధించడానికి (3.7,2', (3.73 ల నుంచి 


క జవ TEE స్‌ 
౮(€) re IN అగా \ (t) ఆ |! (ఓ) a (t) a ౯ 3.7.1 
Pa న | హై న Pei | Rew (n > 0) 
గి గె సగటు సేవాకాలము జ haw = 
హా వ న న ల న ———-— 90D) టా 
(౮ సగటు అంతర | పవెశకాలము న ge 


తివ[త (traffic intensity) ఆంటారు. (3 7.5) నుండి, 


యి ౯ ఎ ~*~ n ౨8 
1+ ల్లా — ౨ న్తై PM<o My? 
n=] ఓ లో లీ == 0 


కావాలంటే ౧ ఈ 1, అంటే | 6 1 అవుతే (౫, 1౫ 0} యొక్క అవధి విభాజనము 
{7} ఉంటుంది, ఈ సందర్భంలో (3.7.9), (3 7.10) నుంచి 


= CTT ele 1 
| మ కరి ఏన 
nm =(l—pP)P (n= 0) ) 
(గ్నా. ని జ్యామితీయ విభాజనమని గమనించండి. Lt XxX =X అని వ్రాసే, 


టాయి 
E(X)= 0 (1 భన Var: (X) =P (1 - క అవుతాయి. 


t క్షణం వద్ద క్యూలో పవెశించిన కష్టమరు శ గువా వ్యవస్థలోకి చరక ముందు 
క్యూలో నిరీక్షించే కాలము తో సూచిస్తే! ౪ కోలో అతనికి ముందున్న వాళ్ళ సేవా 
కాలాల మొతెిసికి సమానమవుతుంది. [17 t =9} కూడా యాదృచ్చిక _పకియ. దనిని 
నిరిక్షణా కాల (ప్రక్రియ (waiting time process) అంటారు. M M 1 క్యూకు 
సంబంధించి , యొక్క అవధి విభాజనాన్ని ఇప్పుడు పరిశీలిద్దాము. సేవా కాలాలు |"! 


అంక మధ్యమం గల బుణఘాత విభాజ నాన్ని అనుసరిసాయి, కాబటి + కరానికి క్యూలో 
= ల 
ఇ మంది ఉంటి, 


WwW = ఓకే బుణఘాత విభాజ నాసి అనుసరించే 1 స్యతం|త యాదృచ్చిక 
చలరాశుల సంకలనము. 
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కో WwW, యొక్క. విభాజనం కింది సాందతా [పమేయంగల గామా విభాజనమని తెలుసు, 


fw, (77) = వా భా ఆటా wW>0 


n! 


Lt భగ ళా Fy(x =P(W Sx) ౧ నూచిస్తే, 


ఓయి 
Fy(0)=P(X=0)y=n =(1—P) (3113) 


n= | 


ఆ Ta , నమ , న" 
n' 
l 


|| 
1 tg 


n 





= A(1—Pye పై 


dwt OU 
=X (1-- 0) et zx dy 
= "1 — 
లేదా Lets PI 3 (2>0 ...3 7.14 
E(W=P{u(1—P)1, Var (Ww) 
wind es ds 


ప నిరక్షణాకాల విభాజనము ఎక్కువ ఉపయోగపడుతుంది కాబట్టి ట్రే (8 Ts 14) ద్వారా 
WwW యొక విభాజన [ప్రమెయము Fy, ల ను ము సీర్వచనం [పకారం, 


న స T- ae 


126 సామాన్య మార్కవ్‌ (వ|క్రియలు ” 
X 
౧ ee 
TTR: 
0 క 


సె {1—P} 
= (1p) + —— 
టీల 


EE Tg VY 


[| 


సు NE | 
= | —Pe PF bb ) fp i310 


వ్యవస్థలో కష్టమరుకు ఆయిన మొ తం ఆలస్యాన్ని పరిశీలించ తలస్తే, నిరీక్షణా కాలానికి 
ఆతనిసేవాకాలం కూడా -కలపవలె. కష్టమరుకు సంభవించిన కాలవిలరీబము ' క ౫ అయ్యే 
సంభావ్యతను D (౫) తో నూచి సే, 


ఇక్కడ V. 'సేవాకాలాన్ని సూచినూ, బుణ విభాజనాన్ని అనుసరించే యాదృచ్చిక 
చలరాశి. 


00 
D (x)= | Fy (xX — Y)fy(3) dy’ 
గ్గ 1 
యం . 
= క. 
0 . . 
EP Ua Re 


(J 


ఇది బుణఘాత విభాజనము. సగటున కష్టమరుకు సంభవించే కాల నటు 
ర 074 సస (4(1- | 1 ఇ ఈ నే! 


వ్యా స M s: కష్టమర్దు ౫ పరామితితో పాయిజాన్‌ |ప్రకియ నమూనాలో 
క్యూను (పవెశించారనీ, సేవాకాలాలు 1 అంక మధ్యమంగాగల బుణభఘాత విభాజనాన్న 
అనుసరించే స్వతంత్ర యాదృచ్చిక చలరాశులని, వ్యవస్థలో స్వతంత్రంగా ఏకకాలంలో సేవల 
నందచేసే సేవకుల సంఖ్య 5 (> 1 ఆనీ అనుకొళ్ళదాము, ఇక్కడ సేవకులందరు [2 రెటు 
ప్రకారం సేవలనందిసారని గమనించవలె. కాని ఆచరణలో వివిధసేవకుల సేవారేట్టు భిన్నంగా 
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ఉండే వ్యవస్థలు ఉంటాయి. ఉదాహరణకు, కంవ్యూటరు కెందంలోని రండు కంప్యూటర్హలో 
ఒకటి అతి త్వరలో ఫలితాలనంద చేయవచ్చు, రెండోదానికి కొంత కాలవిలంబము జరగవచ్చు. 
పె సందర్భాలను [పత్యేక పరచడానికి నజాతీయ, వె జాతి సేవకులు (homogeneous 
and heterogeneous servers) అని అంటారు, 


t క్షణానికి కూ పొడవు య ఆయితే, చె ఉపక ల్వనల దృష్ట్యా Xt = 0} 
అనేది కింది పరామితులుగల సార్వత్రిక క్యూ [పక్రియ అవుతుంది : 
(పతి కు, . "MDs  n<s 


| Pp 3.7.19 
— 500, n-—s | 


ఈ సందర్భంలో (3.7.2), (3.7.3) ల ఆధారంగా, 
స) = = — App 20 
లృ ఆం (1 Tan H+ (eH) ni 869) 
Pp జా (౧ శ కటి ల్ని + సర FSH Pa 


ఈ కూకు అవది విభాజనాన్ని పరిశీలిద్దాము. 1.౨౦9 అయినప్పుడు Lt x = ౫% గా 


to 
సూచిస్తూ, ౫ యొక్క అహాన్య అవధి' విభాజనము i ఉండవలెనంటే, (3.7.5) నుంచి 


| . 


స్‌ yn st st 











1 nn Re MS 
హ్‌ TA Ta sp, 5! ues 
(50) (80). | 
=1+ > షు. J p= 
J జ! 61 5 Su 


n=s-+l 

క (3౧ )౫ కీ 
=1+ 5 టా రాలా చా రిాేయ లు 
లన n వ్ర! 1 


అవడానికి వ్యవన్తయొక్క_ (టానిక్‌ తీవత ౧ = -- = 1 ఉండవలె. ఈ సందర్భంలో 
/ థి క్‌! ' ఆ వ్‌ (ల్‌ | | | . న 


౫ యొక్క అవధి విభాజనమ్మ 








128, =. సామాన్యు మారో్యవ్‌ సపశ్రీయలు. 
Ta (గర్‌ గస ్కీ ఘమ 
m= ఏ } + — (1 mp) ం 9 ఏం 7-20 
0 ల” sl 
a I= l | - 
(8.7.10) నుంచి 
_ ఏర్చి ల్ల | 
షః = [తా ఆ గ (n శ క 
be 37,21 
కీ pn న్‌ స్ట 
జ , | ట్‌ (౨ 5) | 
_ (3.7.2) నుంచి 
ఉట = Pp: గ (5 > Pe షే T, 22 
mn js 
(3. 7 20) — (3. 722) ల నుంచి ఆవధిలో మ్య పొడవు ae స నా 1 విలువ 
కనుక్కొాంటే, న 
న ..00 / 
E (X) = 5 గ షా 
_ n=l 
00. 
nN sp yn 
జ x nt (sf) + ££ n— bd 
ss! 5 
n=0 n=s5 +l 
చాలు 0 f 
= sr 2 an! (sP )" + st Ps 2 (nts)? 
0 క్షే 
| లీ ట్‌ 
కా 1 | జ | 
I mn: ని ట్రే sp 
త 0 
ss 2 TOT) Tp 1 
0 mr అనా 
Fr Hl 
0 fe 4.3.7.2 
(=o 


1 క్షణం. వద్ద క్యూలో [పవేశించిన కోష్టమరు సేవా వ్యవస్థలోకి చేరకముందు. క్యూలో 


నిరీక్షించే. స Ww, అయితే, దీర్షకాలలీలో Lt 
t—ఇ 


W, = = W తో సూచిస్తూ, 


గ 


ui క 
శ » 
"te hay స గ్‌ గ్‌, 
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Fw (x =P(W క వి అయితే, ' 
Fw (0)=P(X<s) ] 
క్‌ నా. వ్‌ జ 4 \n 
కస 2 (sP) ...3.7.24 
n=0 ల 
dFwx-=P(a<wsatd) | 
Co 
= 0 వై! జేన్‌ స లమ X=nP X=n) 
 anmkbs 
ప J Es wad Su రేగ, 7 
n=§ (n'— 8)! 
00 _ 
= > లీల మకీ | su PR-5n dx 
n=s (n — s) f 
= 564 గ 6ా (60-14) వ dx 
1 (1) = sun, 6 (టా) 2 . (౫ >0y LT 
3.7.25) డ్వారా, E Ww) = Ss Se 8726 
| sp (1 — P) 


M MI క్యూలోని అవధి సంభావ్యత లను పరిశీలించినట్టయి తే, 

a = (1 గ =P (X = = 0 , ఆంటే దీర్భకాలంలో సేవకుడు ఊరక ఉండే సంభా 
వ్యత 1-౧ ఆనీ, ప్రారక ఉండని (busy ) యాగా గ కు సమానమని గమనించాము. 
ఇదేవిధంగా 24 M 5 వ్యవస్థలో కష్టమర్ష సంఖ్య 25 అయితే 5 సేవకులు కూడా 


ఊరక ఉండరు. కాని కష్టమర్ల సంఖ్య k (< ఖై wan ఏ 'సేవకుడై న ఊరక ఉండని 


k ; 
నంభావ్యత _ అవుతుంది. కాబట్టి దీర్భకాలంలో క్‌ సేవకులు కూడా డర కే ఊండని 
ర్‌ 


సంభావ్యత 
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గ్గ క, sp + I Sd | 
0 క Te 
జూ 'y జ ॥ 


కలా 1 (వన 2 (sp ™ 
ii “5s vet! 2 5 [sn 
3 a nh — 
జో 0-౩౨ Fa, 
350 5-1 “21 sp ) ౩-1 క్‌ 
aa | గ్‌ గ 2 లీ తా 
( )! n=s+l ల 





వస మఖ 


దీనినిబట్టి M M 5 లో కూడా సేవకుడు ఊరక ఉండని సంభావ్యత ట్ర వ్యవస్త [టాఖక్‌ 
® 
త్మ వతకు సమానమన్నమాట, 


ఒకే(టాఫిక్‌ తీవ్ర గ గల 4 M 2 34, M 1 క్యూల పోలిక: 
(3.7.20) — (3.7.22), (3.7.23) లను పరిశీలించి, ఆవధిలో $ = 2 
సేవకులు గలక్యూM M 2 యొక్క సగటు పొడవును వాస్తే, 


EX = 2p 
YT) ih 


అదే గ గలక్యాM M 1కు సంబంధించి, అవధిలో దాని పొడవు ౫, గా నూచిస్తే, 
3.7.13) నుంచి 
వ జ 


ఈ రెండు సగటులను ఫోల్ళ్చితే, 


జనన మరణ (పకియకు కొన్ని ఉదాహరణలు 131. 
2p గ 

SES పా Es Eg 

(1 జూ గ) (1 P) 1—pP 


కానా. 


p 
య = చా లా 0 
లా 
దీనినిబట్టి ఒకే [ట్రాఫిక్‌ తీవతతో రెండు క్యూలను నిర్వచిస్తే, దీర్హకాలంలో ఇరువురు 
సేవకులుగల క్యూ పొడవు కంటె ఒక సేవకుడు గల క్యూ ఆళంసిత పొడవు (6౫960666 
length’ తగ్గడాన్ని మనం [గహించాము. సేవా పరిమాణం కంటె సేవా నాణెత మెలుగా 
తలంచడానికి ఇదొక మంచి నందర్భమని స్పష్టమవుతుంది. 


నంబిగ్గావన్గతో వ్యా M M 1 (Queue with balking): క్యూ పొడవును 
చూసిగాని మరి వ్‌ ఇతర కారణాలవల్ల క్యూని _వవెశిద్దామని వచ్చిన కష్టమరు సందిగ్ధంలో 
ఉన్నా ఉంటాము. సేవ సమయానికి "లభించదేమోననిగానీ, పరిమిత నిరీక్షణా స్థలాభావంవల్ర 
గాని, మరే ఇతర కారణంవల్లగాని క ష్టమరు సందిగ్గావన్ధను పొంద వచ్చు. దీని దృష్ట్యా, క్యూని 
| పవేశించే రేటు క్యూ పొడవుపె ఆధారపడుతుంది. క్యూ పొడవు £ — పవేశించే 
రేటు త్న్‌ అనీ, సేవారేటు | లు అనుకొ దాము, 


కూ్య్యూయొక్క అవధి విభాజనము (| అయితే (3.7.9), (3.7.10) లలో 
టపా 4(9 ౫1 ను, కింద నిర్దేశించిన ౫ విలువలను పతిక్షేపిస్తే ఏర్పడే వివిధ 
'క్యూ'లను వాటి అవధి విభాజనాలను చూద్దాము. క 








A 
ol మా వ. పు తే, sad క సల్‌! 
(2) గె ey (n NN ) అయి 
క్షే 
త == 
0 ల" 1 Na 
I+ — డి డా — Tf 
pf 2! HB, 
I) జ [| 
= తట్‌ _ e p= — 
ఓ (* J 
క pn క స a స. 
nm = gt | ( 0, ls 2; 3 y: = 30.25 
nm n! | 


ఇది 0 = = పరామితితో పాయిజాన్స్‌ విభాజనము. అందువల్ల ఈ సందర్భంల్‌ క్యూ 
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M M 1 ను పాయిజాన్‌ క్యూ (Poisson Queue) అంటారు, 


(b) NS తా. 6 | \ 

n [ఛి 
 ..37.29 

=0 n=N 


అయితే, :'శీ.7.9), (3.7.10) ల నుంచీ 








_ 4 N 1 స ] ఇ n / ల ఇ N-=n ks 0 ప్‌ ఖ్‌ . 
_ rm hn’ | కత ఉల a 
మె క గా 6 ) me 





ఇది p= (1 2 టా! నంభావ్యతతో ద్వివన. విభాజనము కాబట్టి “ఈ నందర్భంలో 
క్యూ లేశ M 1ను ద్ర్‌పద కూ (Binomial. Queue) అంటారు. 


N~+n 

. (0) NT (n = 0) see లే! 

అయితే, 

1 "'N 

nn =— ]J—_ 

0 Nu 
TY == భల EE 1-N 1 
టై . Na my (n= 0) అట తే. లే 


ఇది రుణద్వివద విభాజనం కాబట్టి రః నందర్భంలో oo: M M 1ను Mange క్యూ 
Negative Binomial Queue) ఆంటారు. 


నా ౧56% ౫ > 
నా | . ల | 11 ae = గా పత pe 
= 0 గి > | స అయతే, Save - ్ష | 


bey gle (కిక 


క్యూ పొక్షవ్ర N అయిన తేరవాత క్యూలో కష్టమక్టీ ప్రవేశం లేదన్నమాట, (8.7.9, 
పె, 7. 10) ల నుండి, ఖ్‌ 


శీ 


దినిని “పరిమిత నిర్తీక్షణాస్థల క్యూ' (finite waiting room gueue) ఆంటారు, 


(౯ ౫,ను సేవారేటు 4 వై ఆఢాఠపడేటట్టు చేస్తి కింది విత్రంగా నిర్వచి స్తే; 


ps —an wre 
A =}్శe ట్‌ ౧౨౦, a~>0 ప ర్‌ 


(3 79), (3.7.10) ల ద్యారా 


| యం య్‌. 1 
n= 5 prynm-) | 
0 | 43.736 
in (M1) x 
ష్ట్ర Br స గ (n>0) 3 


కష్టమర్గ సందిగ్గావస్థ విషయం తెలిసినప్పుడు, అవధిలో క్యూ పొడవును 
గురించిన ముఖ్య లక్షణాలను. కనుకో,, డానికి పె ఫలితాలు ఉపయోగపడతాయి. ఈ ఫలితాల 
ద్వారానే, అవధిలో కూ విభాజనం తెలిస్తే, నందిగ్గంలో ఉన్న కష్షమర్ణ ప్రవర్తనను కూడా 
తెలుసుకోవచ్చు. ఈ రెండు విధాలుగా క్యూ M MM 1 కంటె కూడా ప ఫలితాలు 


ఆచరణలో నిజ పరిస్థితులకు దగ్గర నమూనాలవుతాయి, 


8.8. పోల్యా (పక్రియ (Polya Process 


ఈ'పకరణంలో నూర్య కిరణ [వసారణ (Cosmic radiation) సిద్ధాంతం 
లోనూ, జీవిత ఖీమ సాంఖ్యక శాస్త్రంలోను విరివిగా అనువ ర్రింపబడే పోల్యా (ప్రక్రియను 
గురించి కుపంగా చర్చి స్తాము. 


{X, t ౫.0) అనేది పాయిజాన్‌ [ప్రకియ అయితే, పతి ౫ 0కి (వతి 
స్థిర t (t > 0) కు నంబంధించి య యొక్క సంభావ్యతా విభాజనము 


(సట 


n! 





ర్న — p (X — n NX) కానా et, 1] = 0, 1 ia అలి | వెంకి] 


౫ కూడా కింది గామా విభాజనాన్ని అనుసరించే అవిచ్చిన్న యాద్భచ్చిక 


చలరాశి అనుకొందాము : 





= 0 \N<s0 
ఇప్పుడు సిర t కి సంబంధించి, 2 వ పరిమాణ (2 — dimensional) యాదృచ్చిక సదిశ 
XK. ౫) యొక్క విభాజనాన్ని పరిశీలిద్దాము. ఇందులో X విచ్చిన్న యాదృచ్చిక 
చలరాశి, గ అవిచ్చిన్న యాదృచ్చిక చలరాశి కాబట్టి వతి 1 > 0, ్న, > 08, 
P(X —n, hE NE rl) 
= P(X, =n గీ, క. చ A+ h). P(A, << A క. +h) 


. లు గీ ల.యొుక్క సంయుక్త సంభావ్యతా పమెయము ; 


క. వ nn 
Lt Hm (ASA SAS్నA Th) 











1-౨0 
య a” 
షే | | e Nt = gy 64౫ 
n!- ల. / Vv 
అవుతుంది. ౫, యొక్క. ఉపాంత సంభావ్యత ప్రమేయము 
ల = hota oo” Ha 
శ a ; fp | | 
లం. Was ప 
ఓ స ౪. స్ట 1 
వో శీ శ Vv i i 
() —_ = 
యం 
మ {tn ణి | 
TET EE Cp త 
స గ ళ్ళ nt, 


క్యా ™] a mS థో ళ్‌ లీ 
న ఖా 


పోల్యా (ప్రక్రియ [95 


art! /(n-+v) 


స (vy +n— 1 €- a 
n! t-+Ha t+a 








n = 0 అయితే, 





py = P(X = 0) = 








f శ 
క en diab bes (vara) t p09, 
ష్‌ n! t+a ° 
nn  nzhhue., 388 
l 
(3-83) లో కక మ కాగ ని | పతిషెవిస్తే, 
p= (1+td) 
| 
1 | 
pss (1+d)...... 1+(n-ld t అ న. 
n n | 1+ td 


1౧641) 
da [06 iI+td 





డీని అంక మధ్యమము మాన్‌ (X) = 


విస్తృతి =V(X) = t(1 + td) 
(8.8.4) ని పరిశీలిస్తే ఇందులోని (8 


Pr =], p'‘Y=.0 n= 1, 2, ర్‌ హ్‌ 
ఖ్‌ >” మ్‌. శల, a ; © పే _ ॥ స | § a ని వ మ్‌ .. ర్‌ 
ఇకా “లా ళ ? 


ఆనే'శాలి సీయమాలను తృ ప్రిపరుస్తుందేని గహిస్తాము. t దృష్ట్యా (8.8.4) ని ఇరు వైపుల 
అవకలనం చేస్తే » Pr (Fx a కింది అవకలన సమీకరణాలు వస్తాయి : 


- శృష్తీడ సొకూన్మ కూకో్యకీ (కకత 





p Es le pe) 4.3.8.5 
0 _ 1Ftd °. 
p = — t+ nd sar (0, n= 1,25... ...3.8.6 
వ TF mn IF nm! 


(8.8 5), (3.8.6) సమీకరణాలు వరనగా (3.4.41, (3,4.5) లతో వీకీభవిస్తాయనీ, 
పక్రియ తీ వత 


x (t= A LY nd 
గ్‌ 116 
t మిద ఆధారపడే ప్రమేయకుని (గహాసాము: కాబట్టి (ర్చి t = 0) పశ లో చర్చించిన 
కద్ధజనన (ప్రక్రియ అవుతుంది. కాని భేద మేమంటే, దీని తీవ్రత కాలము 1 మీద ఆధార 
పడుతుంది. అందువల్ల ఈ (పక్రియ వై జాతీయ non-homogeneous) పశ్రియ 
అవుతుంది. 


ఈ |వ,క్రియలో € కి బదులు ల 


(= 


వ 
అనే 7 పరామితిలోని _పమేయాన్ని 
d 


(పతి షెవింఛి, పె అవకలన సమీకరణాలను సూక్ష్మికరిసే, ఆవి 





dp, ( జల (7) 
“టా 7 
ap”) _ ( } ma d (7) 
గా mn (1 ల nd )p, RE (a. 1) Pai b 
n= 1, 2, 


అవుతాయి. ఈ సందర్భంలో త్మీవత స్మా శేగ లియే 7? పె ఆధారవడదు కాబట్టి 
Xx, t= 0! సజాతీయ |ప|కియ అవుతుంది. 


'నిర్వాచనము 3.8.1: (యు (0. లోని వేష లు 884) లో పరాన్న 
సనంభ్రావ్యతా _పమేయాాలను అనుసరించే యాదృచ్చిక. చఛలరాశులు అముతే, ఇట్టి (గ, t>.0| 
| హ్మకియను పోల్యావ్యకియ ‘Polya process) అంటారు. 


లల ఫ్లునకపా రంభ (పక్రియ (Renewal process) . | 


ఏదైనా గణన ప్రక్రియకు సంబంధించి వఠస సంఘటనల మథ్య పరి అంతర్భం 
భ్రవ వ్యవధ్గులు ఒకె ఖుణఘాత విభాజనాన్ని అనుసరించే .స్యతంత యాదృచ్చిక చలరాకులు 
అయితే, అది సాయిజాన్‌ |ప,కియ అని 3-3 పరణ౩లో చర్చించినాము- అతంగృంభవ 
వ్యవధులు బుణఘ్మాత విభాజనం కాకుండా. ఏదై నా ఒక యాదృచ్చిక విభాజనాన్ని అనుసరించే 
స్వతంత్ర ధన యాదృచ్చిన చలరాశులు అనుకొని, 33లో చర్చించిన పాయిజాన్‌ (పక్రియను 
సార్యతికం చేస్తే ఏర్పడే గణన (ప్రక్రియను ఈ (ప్రకరణంలో పరిశీలిద్దాము., ఇటువంటి 
గణన [పకియను పునః పారంథ ప|కియ [Renewal process)అంటారు 


క్రింది ఉదాహరణలలోని సంఘటనలను పరిశీలించండి : 


. (2) మాడిపోయినవ్పుడు పునరుద్ధరించిన లై టుబల్బులు. ఒక నిర్జీత స్థల |పదేశంలో 
t సమయానికి పు నరుద్ద రించిన లెటు బల్బుల సంఖ్య, N ఆనుకొందాము. 


(ర) యంత్రం చెడిపోగానే యంత్రంలో చెడిన విడిభాగాన్ని పునరుద్ధరించిన సార్లు 
(0, t లో యం; తానికి సంభవించిన ఇటువంటి పునరుద్ధర ణల సంఖ్య మ అను 
కొందాము. 


(6) ఒక పట్టణంలో సెంట్రల్‌ సైషన్‌ వద్ద నమోదు అయిన రోడ్డు (పమాదాలు 
“0, € లో సంభవించిన రోడ్లు (ప్రమాదాల సంఖ్య N ఆనుకొందాము, 


పె ఉదాహరణలలో (0, t లో నంభవించిన సంఘటనల సంఖ్య N అయితే, N, ఒక 
.వ్మరోగమన పూర్ణాంక మూల్య ప్రమేయం కాబట్టి {N,, ( = 0) గణన |వ|కియ.అవుతుంది. 
i—1, i వ సంఘటనల మధ్య పై వ్యవధి క [1 = 1,2, 9 జల) ఆయితే 
T,, టా wats Tu wen ఆంతర్చంభ వ కాలాలను నూచించే ధన యాదృచ్చిక చలరాశు 
లని తెలుసు, | 


నిర్వచనము 3.9.1: అంతర సంభవ కాలాలు .T,, 11+, Ts». ఎదైనా 
ఒకె విభాజనాన్ని అనుసరించే స్యతం|త ధన యాదృచ్చిక చలరాశులై, (0, లో సంభ 
వించే,,సంఘటనల నంఖ్య మో తో ప్లర్పడే Ns i= 0. అనే గణన (ప[కియను పునః 
పారంభ (పకియ (Renewal process) అనీ, ఈ విధంగా సంభవించే సంఘటనలను 


పునః సంఘటనలు (renewals) అనీ Ts, Ty; ».- లను పునఃవారంభ కాలాలు 
(Renewal periods) అని అంటారు. 


9 tgrtys cee aes (7 య. <th<t య ,,.) క్షణాల 
వద్ద సంఘటనలు పునః |పారంభమవుతాయని ఆనుకొంటే, Tf tt, 
(i = 1, ప్ర ఎం) అనే అంతరృంభవ కాలాలు ధన యాదృచ్చిక చలరాశులు. ఈ 


( (| 
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గ గ్య ... లు పాయిజాన్‌ (ప్రక్రియలో ఒకే బుణఘాత విభాజనాన్ని - అనుసరించే 
స్యతం|త యాచద్భచ్చిక చలరాశులని సిద్దాంతం 3.3.3 ద్వారా గమనించాము. ఒక్కొక్క 
పుడు తొలి సంఘటన సంభవ కాలము ట్‌ మిగిలిన ఆంతర సంభవకాలాలు T, iy | 

ఆనుసరించే విభాజనాన్ని పాటించక లం అందువల్ల 9 టా *లు' స్వతంత 
దన యాదృచ్చిక చలరాశులై T,, క =, లు ఒక విభాజనాన్ని ee సంఘ ట్ర 


నల సంఖ్య వ అయితే, jn, t = Hh ని కాల విలంబన పునః పారంభ ప ప క్రియ 
(Delayed ee process) అంటారు. 
(SE Te, 3s రు T, యొక విభాజన [ప్రమేయము, 
F(x)=P{T SxyE(T)=|p>0 sa అత ఫి! 


T, యొక. విభాజన (పమేయము F, (౫) = రై (T, ఈ న్‌) అని అనుకొందాము. 
n 
WwW =, గా nel, 2, 3, 0) 


అయితే WwW సంఘటన ౬ సార్లు తిరిగి సంభవించడానికి పై కాలాన్ని 'తెలుపుతుంది, 
(పత్యేకంగా, 


గంచె చే 0, ₹్య = గై = 1వ సంఘటన నంభవించడానికి పక్రేకాలము 


4 &ి శ | =” న్‌ 
Ce WwW - శివాని, 1 ఉన ఫి ఫన్‌ వ న | "a 
; a mm + us నై A నమామి శే | ట్‌ ta & 
క bh 
జ్జ 


ఖా (| 1 కలి : * 99 . ౯. 
1, క్ట. waa T లు స్యతం[త యాదృచ్చిక 'చలర శులు కాజిట్టి, వె ఉవకల్యనల దృష్ట్యా 
(చ= లి గా sax)=F, (x ) * 2 (౫) క F(x) 
ల = త్తి sa 
Tog a తలు 1 సారు 


u జ! క 

గ c= క్షా శ్లో ళో - జో మనా గ్‌ స్స్‌ M న 

న్‌ — meh - స os + సో - 
ప్ప జ 


కింది లెప్పాస్‌ _ సభీన్‌ పరివ రికాలు లు Stieljes ను. . 


పునః పారంథ పక్రియ {39 


00౦ స, 
(0 (6) = | dF (x క వాసవం 6౫ ౪ | 
0 | 
4992 
న్న 
యి | . 
( (9) = | ఫ్‌ d F, (x) వాగ్తవం8 > 0 


ఎ 


దృష్ట్యా WwW యుక్క_ సంభా వ్యతా విభాజనోన్ని తెలు సుకోవచ్చు. (3-8 ద, (ప్రకారం, 


9 (8) = dF, (a)=f, (8) శ (8) =! 
(n = 1) ...39.3 
9.9.1 వ యక, సనమ ౨ 


నీద్ధాంతము 3.9.2 : N, హు చలరాశికి సంబంధించి, 


l: pie =P (మ = F (0 A (t) .« 98.9.4 
అతి 
ii. U (1) = ౯ IN) = 5 Ff. (ఓ). ఆఅంలీ 9.5 
క! 
ఇక్కడ F (మ) = (౫) * Fr) (5 


నిటావణ : క క. WwW, క t అనే | ఘటనల ం (బల) ॥ ను పరిశీలిపే: 


రెండూ | సమాన చీటనలని గమనిస్తాము. . 
క “ce అగ 
జే శ గా కుళఖన్నా (ty 39.6 
కాని P(N=ny=P(N2n)—P(N, 2a) 


ra 


Pp (N ae n) = pr! కూ FEF (t) జా 1 (1) ళ్‌ క. 3.9.6) 


$46 సామాన్య మాకోోంట్‌. కరీ 
దీనితో (8.9.4 ను నిళూవ్రీంచినాము, ఇక్తుడు. స యొక్త ఆంక మధ్య మాన్ని కన్న 


కో ంద్రాము, [పకి t= 0కు, ms ; ee 
క 
00 
౮ (ఆకట్టు = 2 np 
pal n 


శ 


వం వ _-- 2 Pa +3 pp ఆ ల 


= (BT క న. క + వ. 


iD లం 0 ce 


} 


= {t) "nn (t 
= 2 Pt 2 రట శ మై వ 
జక 1 n= 2 n= వీ 


= ఖ్‌ ఆ ఖా ళ్‌ | ట్ట 
4 శ + కీ 
ణీ 
ళా 


= (మ ౨ 1-౨ గ్యా2 2) +P(N>8)+t... 


= 2 వివా కల న 


కం || 
" (| ," de | 


(3.9.6) నుండి 
౮ (1) = ఫై || F, (4 


దీనితో సిద్ధాంత నిరూపణ పూరి అయింది. 


fe Te | | i 
గ త్తే 


ఒక పరిమిత వ్యవధిలో అనంతమైన పు నఃనంవుటనలు సంభవించడం సాధ్యమా? 
అంటే, t(< ౦0 సమయానికి N, = 00 అవగలదా అనే విషయం ఆసంభవమని 
రుజువు చేయడానికి N హా గరిష్ట..:॥ ఫ్‌ గా it | అని. గమనిద్దాము, 
n 


W Fs Tp Ek, క I. లు" ఊక -బభాజనాన్ని అన్య రించే స్వత రత 
I~ 


యాదృచ్చిక చలరా పలనుక్తొం టె, దృడ డ _ బృహత్సళంఖ్యా న్యాయము ‘(strong law of 


పున్యవోరంభచప క్రియ ' -- FAT 


large numbers) దృష్ట్యా 0-౨ 0౨ ఆయినవ్వుడు 


కో 


కేగి” | 1 స 
—= — E(T,) = u'>0 Els), ve 


7 WwW. _ 
అంటే, ': PRP 1 ep =] 
జూ క! ఐనా 
n-> 0 


rr ఒక పరిమిత ధనాంకం కాబట్టి 1౨౦ అయినప్పుడు టే ఆ య అయ్యే "అవకాశం. 
ఉంది అంటే, కొన్ని పరిమిత 1 విలువలకు మాతమే. గ t అవుతుంది. ఆంటే 
వళ్ళ యలు. పతిః 0కి మో 6 0 అయినప్పటికీ, 


V7 వి . Lt: N క IY. దా 00 ఖ్‌ l ec. 9. | 
| క యి ' > 


+t sie 


ఏ er NN. = పునఃనంఘటనల సంఖ్య మొతం పరిమితం కావాలంటే, ఏదో ఓక 
పునఃహైరంభకాలం అపరిమితం కావలె. we 


P Ny [= 0, =P = = 00 ఏదో జక ₹ కు “సంబంధించి. 


గిమునిర : T, “౨, లు ఒకే బుణఘాత విభాజనాన్ని అనుసరించే స్వతంత్ర 
యాధృచ్చిక్ల చ క "ie F wn F (మున. 


Fr ఖో +1 


xP 
. dF (x) = తావ లాపీ dx 
UTE 
అప్పుడు గామా విభాజనపు సంకలన ధర్మము (additive property) పకారం, 


d క్‌ (న = యా ea ld 


చా 
cer FY a ల్‌ యగ P : . i £ 


నామాన్య మార్కోవ్‌ 'పశ్రీయలు 
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x ల. 
F (౫) = | e-*7 సమౌ yrP-1 btn 
n ల /n.DPD 
np—1 
Ax) 
2.0 
3.9.4 ద్వారా, 
ర్న) = ర్న (ఓ) వష (1) 
(+ 1) 2-1 10 చా 
న చా (A ఓ) (౫ t) 
మః r! ప్రమ r! 
=  r=0(0 [= ల్‌ 
ర. 
వ్‌ . At) ( 
= At > (n=0, 1, 2, 460) 
r= np 
ప్రత్యేకించి 9 = 1 అయినప్పుడు, 
F (x) = 1 — ఠె ౫౫ 
At) 
pe = 6 క (2 చా 0, కే 2, oe 


అవుతుంది. ఇది మార్కోవ్‌ సందర్భంతో ఏకీభవిసుంది. అంటే T,, టా + లు ఓకే బుణ 
ఘాత విభాజనాన్ని అనునరించే స్వతంత యాదృచ్చిక చలరాశులయితే, పునః పారంథభ్‌ 
[ష్మకియ పాయిజాన్‌ [ప[కియ అవుతుంది, దీనినిబట్టి, పాయిజాన్‌ పృకియ ఒక సామాన్య 
పునః పారంభ [పక్రియ (simple renewal process) క (పత్యేక సందర్భ మవుతుందని 
గమనించవలె. 


ఉదాహరణకు, పునః వారంభకాలాల విభాజనము జ్యామితీయమయి, 


a ము నా వ నీ 
P(T=x=p(l—~-p Xl, 23, తిధి ఫి 


పునః పా రంభ ప్రియ వ. 143 


hn ఇ 
అప్పుడు W = 5 గ యొక్క విభాజనం జ్యామితీయ సంకలన ధర్మం [పకారం 
యూ. క 


బుణద్విపద విభాజనమవుతుంది. అంటి, 


I 


P(W =k) = pr (Lepr వా 
శీ 


(3.9.6), (3.9.4) ల నుంచి, 


= _ ™ k_ 
Pn) 2 wad WUC 
! — | ? | 
we. re 
వ -¥ k శ pr+1(| pa prs -1 
k=n-+l | పష. 


ఇక్కడ t,t లోని పూర్ణంక విలువను నూచిస్తుంది.. 


(89.5) లోని ౮ (౧ = E(N, అనేది (0 ౯ లో సంభవించే పునునంఘట 
నల.సగటుసంఖ్యను తెలుపుతుంది. దీనిని మామూలుగా పక్రియ యొక. పునఃపారంభ 
[ప్రమేయము (renewal function) అన్కీ దీని అవకలన గుణకము (differential 
coeffiecient) ను పునః|పారంభ సాందతా |పమేయము (renewal density function) 
ఆనీ అంటారు. | 


t క్షణం వద్ద నంభవించే పునః సంఘటన యొక్క సంభావ్యతా నాం దతా పమె 
ధరమ క (ఏ గ ముర, 


శ 


u(ty)= Lt P. (bt +FAt లో సంఘటన సంభవమవడం | 
ht—>0 .. ' 
CO 
= సె Lt P. (bt+At లో సంఘటన 
r=1At—-~0 tt» 3 


[వ సారి పునః[పారంభమవడం లై 
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సు . 
i= | Nt At, 
యి 
= 5 if (t) 4 3.9.8 
i r= 


ఇక్కడ F » (0) పరమ అవిచ్చిన్న [ప్రమేయము (20501016 continuous function 
అని' Er 1) = f (1) అనుకొందాము (39 5), (3.9.8) ల నుండి 


జ 
(౧౩ వ గి 2 f (tt = u(t 
(t) క (1 | య్‌ ల (5 Ly 
పునః|పారంభ [ప్రమేయము U (t) ఆధారంగా దానికి సంబంధించిన పునః ప్రారంభ 
(వ్యకియను ఏకై కంగా (uniquely) నిర్ణయించవచ్చుననీ, ౮ (0 క వునఃపారంభ కాలాల 
విభాజనము 1 (౫) క మధ్య: ఆనేకా నురూపత త (One-One Correspondence ఉందని 
కింది చర్చద్యారా గమనించండి. 


ఉదాహరణకు పునః పారంభ [ప్మృకియ యొక. ౮ (1 (1 j= 4t అయితే, ఇది 
గ. ఇ € ను తీవతారేటుగల పాయిజాన్‌ (ష్మకియ యొక్క నగటు మూల్య' |వమేయము 
కాబట్టి U ( t), F (శ) ¢ ల మధ్యగల .అన్వేకానురూపత దృష్ట్యానూ సిద్ధాంతము లవ, 3 
దృష్టా F (౫ ) విభాజనము ద శ = జ గాగల బుణఘాత' విభాజన-' 
మవుతుంది. . | .. 


త 
P(N.=n)= లీ 1)". n= 0, 
t n! 
దీనినిబట్టి మనం నిరూవించకుండా గమనించదగిన విషయమేమంటే (పతిః చలు క్కి 
U (ఓ = E (X) క. రః 
౪ (ఓ, U (ఓ లను నిర్ణయించడం వాటి లెష్టాన్‌ పరివర్తితాలు (1201206 
transforms) ద్వారా సులభం కాబట్లి వాటిని పరిశ్లీలిదాము. 
వ ర్‌ 
oo 
U* (8 హూ 6-01 U(t dt, . (వతి వానవ 6.౫౦  ...9.9.9 
జ wg నట ~ 
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౨8. 


u* (8) = eu (t) dt, ' ప్రతి వాస్తవ 6౫౦0 ...3.9.10 
గ ద్‌ 


ఈ పరివ ర్రీతాల లక్షణాల దృష్ట్యా, i 


య (6) = 90% (9) 


e-0t F. (1) dt =. క (0) 5 


[లే 


U* (8)= — > $, (9 p (ey =! IO 


యయా. ల 
u న. వ. bu 


(8.9.11), (3 9.12) లను నర్షివాస్తే, 


U*(8) = 1) జ. UF (0) (8) న ర. 
(= టీ (చలే (8) {8 | [గ 


(3.9 13), (3.9.14) అ విలోమ ఫలితాలు 


U(=F +: U 4-౯) dF(r 3.915 
/ 
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( 


u (t) జ! (t) + : u (t ఇఇ 7) f (7) dr 443916 
0 


ఈ విదంగా లెఫ్లాస్‌ పరివ ర్రీతాలు (5.9.9), (3.9.10) ల నుపయోగించి, (3.9.16), 
(3.9.16) ల ద్యారా ౪ (t); U (t) లను కనుక్క్హ వచ్చు. 


యాల 


అయితే, N) ౨. కాని t పెరిగినకొద్దీ ఏరేటులో N, వెరిగేది ప్రస్తుతం. పరిశీలిద్దాము. ః 


ల్‌.9.2 అపి నీద్డాంతాలు : "పె [పకరణంలో శీ.9.7) దృష్ట్యా us 60 


N { 
అంకే, Lt అసం ని కనుకొ), ౦దాము. 


[1.౨౦౦ 


నీద్ధాంత ము 398s (పతి 1= 1,2,...కు నంబందించి, E (T,) = 20 


అయితే, 
N 1 
Lt Fa = __ ...9.9 17 


నిథాదణ : N వ పునః| పారంభ కాలము WN, N న పుసః పారంభ 


కాలము టక్‌ +1 అయితె, 
t 


న +1 


అని గమనించండి. 
WwW WwW 
oN ste గ! 
N N N 
t t L 
కాని WN 1 
x t= YS T/N, 





t r= 


కాబట్టి ధృఢ బృహత్సంఖ్యాన్యాయం దృష్ట్యా N+ య అయితే, 
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WN 
N 


t 





t a 
—>—E(T)=|>0 
కొని (౨౦౨ 1-౦0 కాబట్టి t— ౦౦ అయితే; 


Wy, 
జ్ఞ, అక (1 
{ 


చంకా Gus 00 ఆయితే 


WN, FIONN TI NHI 


N N+ N 


t 
ఆని గమనించవచ్చు. 0 అయితే, షా ఓ విలువ కి అభిసరణం చెందే రెండు 


t 
సంఖ్యల మధ్య ఉంది కాబట్టి సిద్దాంత సిరూపణపూ రీ అయింది. 
1 
ఇక్కడ క ని పునః పారఠంభ (పక్రియ యొక, రేటు. అంటాము, 4 0 
| 
ఆయితే, ఆజా = 0 అని వ్యాఖ్యాని సాము, 
u స 


మి 


'౩.9.10 
౧ 30009) 


నీడ్జాంతము 3.9.4: 1.౨ లయ అయితే, 
అని నిరూపించవచ్చు దీనిని పాథమిక వునః పారంభ సిద్దాంతము (elementary renewal 
theorem) అంటారు. 

ఆచరణలో చాలా ఉపయోగకరమైన కింది అవధి ఫలితాన్ని గమనించండి. 


{Np t2> 0. కి నంబంధించి 1, 1, ... లు పునః పారంభకాలాలు అయి, 
E T=), Vv T) జా ౮కి ¥rz= 1, 22 ... అయితే N అవధిలో 


క్ష్‌ 


(3 to? 
Na ea అనే సామాన్య విభాజనాన్ని ఆనునరించే యాదృచ్చిక చలరాశి 
fH క. : 


టే 


అవుతుంది. అంటే, 


IP 


వ్యాప పకియ 


(DIFFUSION PROCESS) 


4.1 ఉపోద్దాతము : 


చనల 2. అధ్యాయంతో స్థితి ఆవరణ, పరామితి సమితి విచ్చిన్నం గాగల 
ప[కియలను గురించిన్నూూ, 3వ అధ్యా యంలో స్ధితి ఆవరణ విచ్చిన్నంగాను, పరామితి 
సమితి అవిచ్చిన్నంగాగల ప|కియలను 'గురించిన్నూ సమ గంగా చర్చించినాము. పస్తుతం 
స్థితి ఆవరణ, పరామితి సమితులు రెండూ అవిచ్చిన్నంగాగల |పక్రియలను పరిశీలిద్దాము 
పక్రియల వర్లీకరణంలో అవిచ్చిన్నమైన స్థితి ఆవరణ, విచ్చినమైన పరామితి సమితిగల 
[వక్రియల తరగతి ఉన్నా, ఆచరణలో మనకు చాలా అరుదుగా అటువంటి. [ప్మకియలు 
ఎదురవుతాయి కాబట్టి [పస్తుతం ఇటువంటి వానిని ముఖ్య (ప కియలుగా భావించడంలేదు. 


అవిచ్చిన్న పరామితిగాగల విచ్చిన్న మార్కోవ్‌ [(ప[కియలను ఆత్యల్పాంతర ము 
(3% శా At లో నంభవించే నొర్ధకం కాని సంకమణ సంభావ్యతతో లాక్షణికం 
చేశాము. కాని సంభవించే ఈ నం కమణ యొక్క పరిమాణం గు రింపదగిందిగా ఉంటుంది, 
ఉదాహరణకు |వకరణము 23.4 లో చర్చించిన కుం జనన ప[కియలో n పరిమాణంగల 
సమూహానికి సంబందించి 011 వ్యవధిలో ఒకే జననం (సం[కమము, సంభవించే సంభావ్యత, 
ఆంటే A. Nt, సార్థకం కాని స్యల్ప విలువ కావచ్చు. కాని జననమె కనక. సంభవిస్తే, 
మూల సమూహంతో ఒక యూనిటు మేరకు మార్పు సంభవిస్తుంది. ౧ స్యల్స విలువ 
అయిన సందర్భంలో ౧ లోని ఈ మార్పు సాపేక్షికంగా చూ సే ఎక్కు_వగానే తోస్తుంది? 
కాసి [పస్తుతం మనం చర్చించబొయ అవిచ్చిన్న పకియలలో At వ్యవధిలో మార్పు 
సంభవించడం తథ్యమైనా, అత్యల్ప At వ్యవధిలో XK లో సంభవించే మార్పు యొక్క 
పరిమాణము, ౫ Hee క. = స కూడా స్వల్పంగా ఉంటుంది. కింద 4.2 [పకర 
ణంలో పెర్కొన్న పి అటట ఈ లక్షజంగల (ప్యకియలను వ్యాపి (పకి కియలు 
(diffusion processes) అంటారు. 


జవళాసానికి చెందిన చాల సమస్యలలో జనన, మరణాలవల్ల, ఆఅంటురో గాలవల్ల 
జీవాణువుల సమూహాల పరిమాణాలు మార్పు చెందుతూ ఉంటాయి. సమూహాల పరిమాణాలు 
చాల ఎక్కు వగా ఉండి, తదనుగుణంగా జరిగిన మార్పులు సా పక్షికంగా చూసె స్వల్పంగా 
ఉండవచ్చు. ఈ విధంగా స్థితి విలువలు పరామితి విలువలు అవిచ్చిన్నంగా ఉండే 


జి 


ఉపోద్దాతమను 1 {51 


సందర్భాలలో న్యా పీ ప(df f1510n)రక మైన ఊజ్ఞాయింపు నమూనాను ఉపయోగించే అవకాశం 
ఏర్పడుతుంది. ఉదాహరణకు, భౌతిక శాస్త్రంలో బనియన్‌ కదలిక (Brownian motion) 
ను పాటించే చాల అణువులను పరఠిక్తీలిే సెం అత్యల్చ కాలము, “+ లో అతిస్యల్స దూరాన్ని 
(Ax) యాదృచ్చికంగా నడవడం గమనిస్తాము. ఈ తుది ఫలితమే (ప కియ యొక్క 
వ్యాపి [పభావమవుతుంది. 


0౦6 6ళ్యళయ6,...6ళ్ళ్నఉ6€(52 1 అయ్యేటట్లు (పతీ పరిమిత 
సమితి (1 15 f+.) కి సంబంధించి ఏ (వృ t> 0) యాదృచ్చిక (ప్రక్రియ 


P(X XX, XK) = P(X xX) (4.1.1) 


అనే మార్కోవ్‌ నియమాన్ని పాటిస్తుందో, అట్టి ప్రక్రియను మార్చో_వ్‌ [పృక్రియగా పరిగ 
ఇేంచాము xX అన్ని వా సవ విలువలు ౫ (= 0 ణగ య ౦0) ను స్విక రించే యాద్భ 
చ్చిక చలరాశి అనుకొందాము. (2. 1, 2) నుంచి, 


F(sxsibha)ymP(X<x X=x) (4.1.2) 


ను షు యొక్క. షరతు లేదా సం[కమ విభాజన |పమేయము (transition distribution 
function) అంటాము (య t = 0} అనే |హృక్రియ 5 సమయమందు ౫ స్థితిలో ఉండి, 


t సమయానికి (-- య్య ౫ కు చెందిన ఏదై నా ఒక స్థితి విలువను స్వీకరించే సంభావ్యత 
(4. 1.2) ' తెలుపుతుంది. దీని దృష్ట్యా, 
(1) F(s,x3t>X) => 0 ర 
పటల ల! 
ii) F(sxit-o)=0F(sxst+o)=1 


ఆని గమనించవచ్చు. ఈ సం[కమ విభాజన  పమెయం సంకెతంలో చాప్‌ మెన్‌-కొల్మొ గోవ్‌ 
సమీకరణాలు (3.2.1) ను వాసే, 


F(s, వ్యవ X) = రే (త్య wy) F(u,y;t, x) 


— 00 
s<u<t కీడే 


412) లోని నం|కమ విభాజన వమేయానికి పాక్షిక అవకలని (partial derivative) 
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ఉంటుందనుకొంటే, 


| లర rn 
WTR) Fs స 


ను Xx యొక సం|కమ సాం్యదత [ప్రమేయము (transition density function) 
అంటారు. (4.1.4) స 


pe 


f(s, శృం వివా f(sxswy)f(uyst,x) dy 
య 
(5 <u< ఓ “41.5 
(4.1.5) నుంచి 
Co 
f S—~ ASX st, x) = | f(sS—ASs, X55, y) 
: ba | 


f (5, 1.4 ౫) dy 4.1.6 


యి 


- f (5 మ శ న X55 y) dy = 1 కాబల్లి 


ఈ 


—0 
యు 
₹(5 గ 0 న్‌ = f (8, x st, 3 | ₹-(5- 0 5, X55 y) dy 
థం. | 


4.1.6), (4.1.7) ల-నుంచి; 


f (s.— A S, x | t, న్‌) య 1 (53. క్చ్‌ t, x) స న 
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0 జ 
గ | . 
యా ౯ (5-- గీకి ss). f(sysit ry 
చాయి 
త (5, x; t, x) (య. 
య 
తానా క f ప్రమాన్‌ [ 9 
= . (5. భీ క్‌ . { G5) ఆసా స X) 
శ CEN 
బి ర్‌ 
న terse tee} oy 
. _ 
rn f (sx ఏ t, x) | (శ్చ) f (5- గీకి Xi 57) రే 
చాయా 
య శ 
రి2 గౌ 9 
"3 3x3 Ue 4. | వన్స్‌, 


f (5 లా TAN S, x అ ప్‌, ౫) dy భో టీల 


4.2. కొల్మో [గోవ్‌ నమీకరణాలు : 


స్థితులు అవిచ్చిన్నంగా మారుతూ ఆంతే, _అతిన్వల్పకాల 'వ్యవధి, As లో 
అత్యల్ప hus “గ మెరకు స్థితిలో. మార్పు చెందే మార్కోవ్‌ _ప్మక్రియల్నను మా|తమే ఈ 
ఆధ్యాయంలో పరిశీలిసాము. కాబట్టి పతి అత్యల్ప విలువ శ = 0 రు నంబరధించి, 


A he సతు. 1) =0(1s) 


(ఇక్కడ Aa —- 0 అయితే, 0 (As) కక 0) 


దీనిని సంక్రమ నం[కమ స్మాందతా [ప్రమేయ సంకేతంలో వాస్తే ' 
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1 జ్ర న 
i. Lt FO | (5- దుక, xis, y) 
| S ల, 
కరా 0 లల... ౧ ాడ్క్‌ పల్‌. 


dy = 0 ...421l 


4.21 తోపాటు కింది రెండు అవధులు కూడా ఉంటా యని అనుకొందాము, (పతి నీ 0కు 








ల 1 షు a 

il Lt y— xX 
yr 5 ర 
f kK చాట 55 క; క్క y) dy=a(x, 5) «..4.2.2 
l i 3 

iil Lt ఖా (3 ఆలా క) 

— 

లక పొన్‌ మలి 


f (s— As, x38 9 ౮) dy = b (క, s) ...:4,2.3 


(4.2. 1) దృష్టా (4. ప్రీ 2). (4 2 3) లు వరసగా (5. - కు 5 అంతరంలో సంభవించే 
స్థితి మార్పు పరిమాణము (త), (యొక్క అంకమధ్యమము, విన స్ఫృతిని తెలుపుతాయని 
గమనించండి. (1 (1). (111) లను తృవి పరచే మార్కోవ్‌ (ప్రక్రియ (౫, t = 0} ను 
వ్యా ప్రీ ప్రక్రియ అనీ (i) (11), క లను వ్యాప్తి నియమాలు (diffusion conditions) 
అనీ ఆంటారు. ' 


(4.1. 8' ని ఇరువైపులా “15 తో భాగించ్చి AS: గా ఆయితే, (4.2.2), 
(4.2. .3) ల దృష్ట్యా, అవధిలో 


. రి _ లి . 
వ. 





ల 
FEb(s) ఛా లేటుత్య పవ... 424 
| 0 


(4 2.4) ని వ్యా ప్రీ (పక్రియ యొక క్ష . తిరోగమన. కొల్ళోగోవ్‌ వ్యా. 


26 
es 
ట్‌ 
(గ 
Sa 
3 


ళా 
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(Backward kolmogorov diffusion equation) అంటారు. $8 లోని తిరోగమన 
పెంపుదల (backward increment) కు బదులుగా, [ లో పురోగమన పెంపుదల 
forward increment}, అందే t నుండి t + At పె విధంగానే పరిశీలించినట్టయి తే, 


జా. 
యా 





dL 8. 
"రి (5, న 9 శ, న్‌ క Ey Pu (న్‌, () f 1 న 9 Et; ౫) | 
ల ఇ 
న శే d x2 {b (మ, t) f er నే గ్‌ న న్‌! ౩9 4.2.5 


శ 


అని చూపవచ్చు. (4.25) కు సంబందించిన 1వ వ్యాప్తి నియమము 
(iJ వయం XK,>8 XK=x)=0(At) 


1 ణి 
లేదా Lt pa f (t,x; t + Ast y)dy=0 ...4 2.6 


దీని దృష్ట్యా (11, (1) లు 


4 


(ii) Lt FT (y — x) f (t, x: t+ At, y dy 
At—30 1-౫ క 3 
=a టే t) hid] 
1 శి 
(iii) Lt wT tae x2 f (ty x;t+ At,y) dy 


= b (వ్‌, t > 0 .,.4.2.8 
(4.2.6) — (4.2.8) ల దృష్ట్యా, 
1 ఇ 
Lt 7 (y —a)"f(t,x;t-+ At. y) dy 
At —— 0 y క లై > ఫ్‌ 


=0,(k=1L2 
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అవుతుంది కాబట్టి, (4.2.7), (4.2 8) లను కింది: విధంగా కూడా'వాయవచ్చు. ' -:-. * 


| ౧ 
రీ 7 య. 
మూ 2 (%, t) ob 2 
1 ss 
Lt 7 పోని) f (tx t+ Aty)d 
=b(xs,t})>0  ..4238 


(4.2.5) ని వ్యా ప్రి (ప|కియ యొక్క పురోగమన కొల్మా[గోవ్‌ వ్యాప్తి 
నమీక్షరణము.. (Forward kolmogorov diffusion equation) అంటారు. (4.2.4), 
(4 2.5) లను మారో, వ్‌ ms యొక్క | ; వ్యాప్తి లేదా (Fokkar-Planck) సమీ 
కరణాలంటారు. వీటిని 1931 లో కొల్ళొ|[గోవ పతిపాదించగా, 1936 లో ఫెల్లరు (Feller) 
మహాశయుడు ఈ సమీకరణాల యొక. సాధనలకు (solutions) సాం|దతా [ప్రమయ 
లక్షణాలు ఉంటాయని చూపి, ఏటి అస్థిత్వ (existence), ఏకత్వ (uniqueness) లక్షణా 
లను నిరూపించినాడు . పెన నిరూపించిన విధానం దృష్ట్యాం ($ 2: కో (4 2.3) లను లెదా 
(4.2.6) — (4.28) లు అనే పోస్తి. సెయమాలను తృప్తి 'వీవపరచె, (పతీ మార్కోవ్‌ 
ప్రక్రియ కూడా (4.2.4), (4 2.5) వ్యా వి సమీక్లరణాలను. పాటిస్తాయని' గేమనిసాము, _ 


(4.1.2) లోని F(55 ౫; ఓ ౫) సంక్రమ విభాజన పమేయము (1-5) అనే 
సం|క మ కాలభేదం పెనే ఆధారపడే పమేయమయితే, | యం శీలా 0 | సజాతీయ 


మార్చో_వ్‌ [ప్మకియ అని తెలును, | 
ఈ సందర్భంలో (21.1.2) లో సంకేతాన్ని సూక్ష్మేకరించిశవాస్తే =“ 
హ్‌ ల mH 


౯ గాం అవికా లి గ్య <x X =x) 


సం్యకమ సాం; దతా |పమెేయము aay, టం ల "is 





నంక్రమ విభాజణన |పమేయము 5, + లతోపాటు ౫-౫ మీదకూడా ఆధారపడితే (వష i= 0}ని 
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నంకలన (2664106) -మార్కోవ్‌' ప్రక్రియ అంటారు. వ్యామ్తి- ప్రక్రియ నజుతీయ 
పకియనేె. కాకుండా సంకలన |ప్కకియ కూడా .అయితే దాని సాం|దతా (ప్రమయము వ. 


f (8 క t, = we or (A 


ఢా వాయవచ్చు.. ఈ సందర్భంలో . (4.2. సేన (42,3) లలోని అంక మధ్యము... 
విస్ప్రతులు స్టీరాంకాలవృతాయి. 


జ 7 ఖే 3 / 
bE a న ఇ చో శకి శి 4 4 జ స స ఇ శ tn ననా 


Peal 
సల 


ral, శ 


hea, batysb © C420 
(42 10) లోని విలువలను (4.2.4), (4 2.5) లలో (పతిశేపిస్తే, ఆ వ్యాప్తి నమీకరణాలు 
కింది పాక్షిక అవక లన" సమీకళణంత్ల్తో వఏకీభవ్షిస్తాయన్లి గమనిస్తాము, _ 


ఇ గం 


రి రి రి? 
గ్‌? x) T పైప ram కటల 2.2.11 
న న. మ. 


[——] 





ro 
{ 


dt 0x 








విచ్చిన్న పరామితి _మార్కోవ్‌ శృంఖల నమూనా అవధిలో జ పక్రియ 
నమూనాతో ఏకీభవిస్తుంచని కింద" [గోహాసాము. = “3 అ= స శ 
ఓక యోద్యర్చక నడకకు వ్యాప్త అవీధ క ౮ 
2 5.2వ |పకరణంలో పరిశీలించిన యాద్యృచ్చిక నడకకు సంబంధించిన నం, క్రమ" 
సంభావ్యతలు 


శ 
శ 


+ | ~— | క న. . : . _ " $ . 
p,.™=h(J—1 n) iJ=ఢ,Tb+£2, ... 43.1 








; fi | శ న్‌ ॥ సే 
n+F+FXx శామ్‌. 
/ n 
2 2 
ఇక్కడ 15 గల) 1న ళ్ళ wn ఆ Xx ED | 6 a 
\ 2 / 


0 మెట్లలో (5695) ఒక అణువు - యాదృచ్చిక నడకలో. కదలే దూరము . ౫ =౪j ా-jః 
అవుతుంది. (4.3.1) నుంచి ౫ యొక్క అఇంకమధ్యమము* పాసృృతి కనుక్కొంటె,'. 


ప; న = షె (Ps ఆ 4), నన = npq 


ఇక్కడ ఇటువంటి యావృచ్చిక నడకకు పనస Fram పరిశీలిద్దాము. అణువు ఒక 
మటులో “గః దూరం కదలుతుంచనీ, దాని కదలికలో రెండు వరస స్థావరాల (position 5 
బై 
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న్నీ 


మధ్య పే వ్యవధి గAt అనీ ఆనుకొందాము. అప్పుడు అంతరం 0, t లో అణువు 
t x 
Far మెట్టలో Ft యూనిట్ల దూరం మేరకు కదలుతుందని భావించవచ్చు. (0, t లో 


{ 
మొతం కదలిక ఉజ్జాయింపుగా FT న్యతం|త నమ యాదృచ్చిక చలరాశుల మొత్తానికి 


సమానము. ఈ చలరాశులు ౫, - చిన విలువలను వరసగా p,q నంభావ్యతలతో 
తీసికొనే యాదృచ్చిక చలరాశులు కాబట్టి.వీటి సమ విభాజనపు ఆంకమధ్యమము (9-9): AX 
విస్పృతి ఓpq (Ax), అందువల్ల, 0, t లో అణువు అసలు కదలిక ‘net displace. 
ment) యొక్క 


ar t Ax 
క మధగ్గమము = —— అ x=t p—q)})— 
అంక మధ్య At శీ aq) A P— a) 


Axe 
At 


.. క న. t 
| 9 __ 
విస్తృతి = At 4pq (AX) = 4tpq 





అవుతాయి, లీన్‌ 0, ్నAt—0 అయినప్పుడు అవధిలో విన్ఫృతి విలువ పరిమితం 
(Ox) 
At 





కావలెనంటే అవధిలో పరిమితంగా ఉండవలె. అంకమధ్యమం కూడా పరిమితంగా 


ఉండవలెనంచి, ౨-౪౧ = ౫ కావలె. వీటికి అనుకూలంగా, 


(లీవ్‌ 2 JD యా ( FAN క న్‌ 4.3.2 
nn , a దారా పవత శం కాజాలు ను eee TeV 
Nt PTE p A 
ఆని అనుకోవచ్చు. ఇక్కడ ౮, కలు తదనుకూలంగా ఎన్నుకొన్న సిరాంకాలు. (45.2 
క ఈ 
దృష్టా (0, లో ఆణువు అసలు కదలిక యొక్క. 


అంకమధ్యమము = | ([ = 2, వినతి = 62 (1) = 2Dt. 


0 (లో 1 మెట్లు కదలిందనుకొంచి, t~ n At కాబట్టి hగ్నt— 0 అయితే, 
5: --* 00. ఈ సందర్భంలో (4.3.1) లోని ద్విపద విభాజనము h (౫, n) అవధిలో 
సామాన్య, విభాజనము f “౫, t) 4౫ ను సమీవిసుంది. ఇక్కడ 


1 
క (గ VE ot yer esp వా 202(t (క -- టట 


,..43.3 


యాదృచ్చిక నడకకు వ్యాప్తి అవధి 159 


ద్విపద సంథావ్యతల మధ్యగల ఆ వృతి నంబంధంనుంచి, 
h(j,jnF1)= రికి (i—bn శంక గ్ర సామే కి! 
దినిని |పసుత సంకేతాలలో వాసే, 
h (వ, ఓ లి 0). = ph (x — న గ t),+-q h ChAmt , ఒండ్చేతె,4 
AX 30, ్నAt—0 అమితే, h (X, టా f (న్‌, t). టేలడసిద్దాంతము (Taylor 


Theorem) ఆధారంగా (4) .)ను విపులీక రించి (Ot), (Ax), ఇంకా పె ఘాతాలు 
గల పదాలను ఉపేక్షించి (4.3.4) అని వాస్తే, -(4 3.2 దృష్ట్యా అవధిలో, 


ef 
f (x,t [=== O At 
(ఇల శరీ ల్యూ +OUAY) 
[ 6 ef 


= మే Pe X భే — ల అ 
చ లీ (1 (లాటీ 


జాతే 








| 82f — 
rence 
1 0 . af 
లా లాలీ మయో టే 1 జ పా 
= టీ ఉలి ద ఫ్‌ న! ల లీ౫ 
1 స d2f — 
red Ba 
+ O(A x)” 
| af ఈ x \2 of , 1 x \|2 O2f 
ఆంతే, షూ క స టె. —— “PF — (A ) tei eRe 
dt D ft 0x ప్ర At రినికి 
af df of 
లేదా ఈ౫ా=ా2౦ PD a 43.5 


dt Ox x2 ర్ట 


వ శేషిక పద్దతి ద్వారా చూస్త కూడా (4 8 3) లోని hake ప e 3,5 యొక్క 
సాధనమవుతుందని' గమని ంచ వచ్చు, oe 


4.4 వీనర్‌ (పక్రియ (Wenier Proeses : 
{x ర న 0. అనే (పక్రియ అవిచ్చిన్న సంకలన మార్కోవ్‌ వ్యకియ అనీ; 
HA st(0 ss 6 t) లకు X యొక్క Pgs విభాజన [ప్రమేయము 
F (3, క్స్‌ 1 as (; 1 - శృ) అనకొందే, 


న గ జ" 
ఫే | + . 
ఇ a 
జా Iw 


౯, (బి = P(X —X క 2, = లావ 


ఇంకా దీని సంక్రమ సాందతా (పమేయము f (5, €; 2) ఉంటుందనీ, 5,.t ల దృష్ట్యా 
F (5s ఓ 2) అవిచ్చిన్న _పమయమనుకొందాము-_ 


X యొక్క- సాందతా [ప్రమేయము £ (5, (1 2) 4.2.6), (4.2 7). (4.2.8) 
లను తృపి పరస్తే, ఆ వ్యాప్తి నియమాలు 


1 


Le © f(tt+ AG 2) dz=0 224.41 
స ఎ : 
At pes అ 7 > 5 
న 1 శ 
త Lt Ar i zf(tt+ At z)dz=a(t) ...4.4.2 
/1 ఓ లాం z <0 
3 క 3 ॥ 
న : 1- ఎ. ఇ 5 | | (| | 
Lt vr 2f(tt+AtZ dzZ=b(t)>0...44.3 


2 కర 
అవుతాయి. ఇంకా, పతి 5, t,2 లకు 
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f (5, t; 2) ఉంటూ, అవిచ్చిన్న [ప్రమెయాలు ఆయి, 


గ d2f ) 
(2) పతి 5, t స్థిరాంకాలకు, Fy ఆఅవకలని 2 దృష్టా ఎకరూప అవిచ్చిన్న 
2 
_ _ uniformly continuous), ఏకరూవ వరిబద్ధ (uniformly bounded) 
[ప్రమేయము అయితే, ] . న 
(గ 2 యొక్క సం్యకమ సాందతా [వమేయము; ff క్‌ (1 z) కింది పాక్షిక అవక లన 
నమీకరణాన్ని తృప్పి పరస్తుందని (4.2.5' ని నిరూపించిన విధంగా రుజువు చేయవచ్చు :. 
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of a of 02f 
__ చానానానాానానాా న ——ా | t: రా b ళ్‌ నా కానాల జ్జ hd, 
ot a (1 = (4 రి22 5 


ఇప్పుడు కొన్ని పాక్షిక అవకలన సమీకరణాలను సాధించి, వాటి సాధనలకు 
సంబంధించిన సాం,దతా [ప్రమేయాలను కనుక్కొ-9దాము 

f=f (వ a x) సజాతీయ మార్కవ్‌ ప్రక్రియ యుక్త సంకమ సాందతా [పమె 
యమై, ౫ ౧౨ +4+త ని] (౫; t, x) 0, శ (వ్యవ ఓ శ 


అయ్యే సీమానియమాలుగల కింది పాక్షిక అవకలన సమికరణాన్ని పరిశీలించండి. 
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ము! id (౮ 10, — 62 ర్డీ (౫; t, 9). - . ..4.4.9 


(4.4.6) ని ఇరువె పుల హి గుణించి, (-- య; య) లో సమాకలనం చేసి, (4.4.8), 


(4 4.9) లను ఉపయోగిసే, 


OP లి 
ప 6 _—___=-— Dg @ ఎం 44 10 
Ot +P లి0 11 | ల 


ఈ పాక్షిక అవకలన సమీకరణాన్ని సాధించడానికి కింది సమీకరణాలను పరిశీలించండి. 
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ఇక్కడ C,, 3 లు స్థిరాంకాలు, పీటినుంచి ఒక స్థిరాంకాన్ని తొలగిస్తే, 
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ఇక్కడ ౪ (.) పమేయాన్ని (4.4.7) నుంచి నిర్ణయి స్తే, 
0x, _ De | 
6 మా D (గ్య) 0, 0) రిని -. త Yr ( ) 
లేదా 
Dg? * 
6+ = exp 10x, నన టంట, పేర 
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(4.4.12), 4.4.18) అ నుంచి 
థీ(త్చ;ఓ 6) = ౦౫9 (16 p(t) —3 0౨ ౮౨ (౧): 
ఇకుడ న 
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లాక్షణిక వమేయవు ఏకీకత్య ధర్మం దృష్టా, వ్యాప్తి నమీకరణము (4.4.6) ను తృప్తి 
మరచే సం|కమ సాం[దతా ప్రమేయము 


రా క; a ల 4, 
(౫; t, rT 7 (1 7 Ea లస - శ్రా u(t) ” 44.14 


ఇది అంకమధ్యమము ల్‌ (1)9 విస్తృతి ౮2 (1) గాగల గ్యానియన్‌ లేదా సామాన్య విభాజనపు 
నాం|దతా [ప్రమేయము అవుతుంది. 


(4.4. 14 ని బట్టీ xX = అని తెలిస్తే, MS అనే పెరుగుదల యొక్క 
సాం|దతా [ప్రమేయము వై వ అంక మధ్యమము, విస్తృతులతో సామాన్య విభాజన మవుతుందన్న 
ఊదూట. దీనినుంచి ఇప్పుడు రిక (పత్యేక సందర్భాన్ని విశదీకరిద్దాము. పె సాందతా 
వమేయంగల [వ[కియ న్వతంత సజాతీయ పెరుగుదలలుగల [పక్రియ అయి, పతీ tకి 
(గ — Xx) = 0; P (X= 0y=1 అయితే; 


య! 


pg (ty=0;02(t)=te2. 
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కాబట్టి, (0, t లో X యొక, సాం|దతా పమెయము 


1 | x2 
f య గ దా ———_ రి నన కాం 4.4. 5 
( ౯74/2 గళ. 2p 2to2 | ( ) 


నిర్జాచనము 4.41: 2 (= 0)=1నితృప్రిపరస్తూ, స్వతంత్ర * సజాతీయ 
వెరుగుదలలు గల ప్రక్రియ (క, 12 0} కు సంబంధించి, (0,1 లో ౫ యొక్క 
సాం:దతా విభాజనము (4.4.15) ఆయితే, అట్టి (స్ట t > 0! (పకి యను ఎన్‌ ప|కియ 
(wiener process) లేదా (బౌనియన చలన (పక్రియ (Brownian motion process) 
అంటారు. 

{X, ta 0} |వ్మక్రియ 'వీనర్‌' (ప్రక్రియ - అయితే, ప్రతి 5, (0 ఓ 8 = 
{ చు య) అకు, 


E(X,—X)=0, V(X,—X) = (t—s) ౮, 
వతి 1=2, 3 ...ఏ (పతి క (i=1,2, on) (| <<... <t) లకు, 
XX T(X —X)+Tet(X, —X 
a ఓ ( ఓ 1) క! న 


ఇక్కడ ట్లో జ — స erry స. — తక లు సామాన్య విభాజనా 
లను అనుసరించే స్వతం[త యాదృచ్చిక చలరాశులు ఈ విధంగా x, Xp, > Xt 
లు స్యతం|త మైన సామాన్య యాదృచ్చిక చలరాభలలో ఏకఘాతీయ [ప్రమయలవుతాయి 
కాబట్టి, ఎటి సంయుక్త విభాజనసము కిం ఏ విలువలుగల బహూ పరిమాణాత్మక (multi-dimen- 


tional) సామాన్య విభాజనమవుతుంది, 
SEs Fe ౮౫ (i= 1,2, soul 


Cov.(Xy,Xy)=t,o* ii=1,2..on;i<)) 
1 ] : 
కాబట్టి యాదృచ్చిక నదిశ (random vector) Wy Xs pee, Ky ) యొక్క 
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రెండవ ఆర్ష ర్‌ ఘాతిక మాతిక (2nd order moment matix’ ui 


(| శ €| శే 

(| 1, ఓ 698 t, 
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శ్‌ ty ty Of 


అవుతుంది. 
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